搭建和配置Syncthing发现和中继服务器
折腾借口
Syncthing
好是挺好的,但就是同步不给力,公共网络服务其质量参差不齐,网络也说不清。最好的解决方案还是自己搭建发现服务器Syncthing Discovery Server和中继服务器Syncthing Relay Server,有效解决网络连接差,非局域网连接慢的问题。
需要材料:带公网IP的服务器或动态DNS的主机一台。参数设置信息官网最全面,参考Welcome to Syncthing’s documentation!,这里只是提少许个人需要的参数,一般使用足够。
搭建发现服务器 Syncthing Discovery Server
下载 stdiscosrv 程序
下载当前主机的发现服务器主程序 stdiscosrv
选择对应版本,服务器基本是stdiscosrv-linux-amd64
下载:
wget https://github.com/syncthing/discosrv/releases/download/v0.14.51/stdiscosrv-linux-amd64-v0.14.51.tar.gz
解压:
tar -xzvf stdiscosrv-linux-amd64-v0.14.51.tar.gz
准备以及参数
创建证书
程序好像也会自动创建证书,这一步或许可以忽略
openssl req -newkey rsa:2048 -new -nodes -x509 -days 3650 -keyout ~/key.pem -out ~/cert.pem
注意更改目录
参数
官网给出了详细的参数配置 Syncthing Discovery Server,简单说几个我用到的参数。
-cert
`=<file>和
-key`=<file>
默认指定运行程序目录下的证书文件,建议将证书拷贝到当前目录下。
-listen
`=<address>`监听端口,默认8443,改不改无所谓,如果有防火墙记得通过端口。
-debug
调试模式,可以查看链接信息
-replication-listen
`=<address>`我也不太明白这个参数的意义,可能适用于组多服务器
运行
将证书复制到程序所在文件夹,执行即可:
./stdiscosr
如果没有将证书放好位置,直接使用命令应该会自动创建证书,或者将证书复制到当前目录再执行。
cp *.pem syncthing/stdiscosrv-linux-amd64-v0.14.51
或者执行:
./stdiscosrv -cert ~/cert.pem -key ~/key.pem 1
注意
记得在防火墙里面放行端口,可以安装ufw
,然后放行端口
sudo apt install ufw
sudo ufw allow 8443
搭建中继服务器 Syncthing Relay Server
搭建好发现服务器后,虽然能找到不同网络的主机了,但是非局域网相互传输的速度还是差强人意。
中继服务器列表:Relay Pool Data,虽有不少国内服务器,但是搭建自己的服务器优势也显而易见。
下载strelaysrv程序
下载当前主机的发现服务器主程序 relaysrv
选择对应版本,服务器基本是strelaysrv-linux-amd64
下载:
wget https://github.com/syncthing/relaysrv/releases/download/v0.14.48/strelaysrv-linux-amd64-v0.14.48.tar.gz
解压:
tar -xzvf strelaysrv-linux-amd64-v0.14.48.tar.gz
准备以及参数
创建证书
参考之前操作,或直接复制过去就好了。
cp *.pem syncthing/strelaysrv-linux-amd64-v0.14.48
参数(必看)
官网给出了详细的参数配置 Syncthing Relay Server,上面提到的不再重复
-global-rate
`=<bytes/s>`全局限速,bytes作为单位,换算成MB应当乘两个1024,可以去这里换算。
-pools=<pool addresses>
非常重要的设置,如果不设置将作为公共服务器发布,他人可以免费使用你的服务器流量,三思!创建私人服务器的方法是添加参数-pools=""
。
-protocol
`=<string>`协议
-status-srv
`=<listen addr>`监听地址,有的服务器需要设置当前公共ip
运行
./strelaysrv -pools="" -global-rate 3145728 -protocol=tcp4
注意
开启防火墙支持,使用ufw
或:
iptables -I INPUT -p tcp --dport 22067 -j ACCEPT
iptables -I INPUT -p tcp --dport 22070 -j ACCEPT
配置客户端
服务器地址配置
运行程序后会生成一个id
,将其拷贝下来
发现服务器:
https://ip_address:port/?id=your_id
中继服务器地址:
relay://ip_address:port/?id=your_id
客户端中替换时,如果可以用逗号和default
分开,这样就能同时使用多个地址。
监听地址
参考官方文档:Listen Addresses
syncthing
的地址可以理解成三类:动态中继池,静态中继地址,TCP端口。
- 从网上获取中继池获取终极服务器
- 自定义一个服务器地址
- 本地端口监听,用于局域网连接
中继服务器配置
如果像我一样只只是同步自己的服务,就可以简单设置为:
tcp4://0.0.0.0:22000,relay://ip_address:22067?id=abcd123...
指定tcp4即ipv4的原因是因为我有ipv6
网络,但是国内v6
覆盖不全,不如简简单单局域网用tcp
,远程就用自己的中继服务器,避免其它的低速远程服务器。
发现服务器配置
default, https://ip_address:8443/?id=abcd123...这里添加
default
的原为了接入一些网络的共享库,如果不需要去掉即可。
结语
Syncthing
目前不支持占位符操作还是挺可惜的,但是设置了自定义的中继服务器和发现服务器之后,可靠性将大大提升,今后可以作为一个常用的软件了,更方便得同步各个设备之间的文件,免去很多折腾的时间。
----------------------------
自建Syncthing中继服务器(私密传输或造福大众)
一.介绍
我之前介绍了Syncthing,作为一款开源的文件同步程序,它的功能还是非常强大的,我也很高兴能看到它被越来越多的人知道和使用,前几天有位朋友留言说让我介绍下Syncthing的中继服务器的搭建,在这之前的一段时间我在网上偶尔看到过有朋友介绍过一次。
首先来科普一下? 不同于Resilio Sync(BT Sync)使用BT协议进行数据传输,Syncthing使用了BEP对等自由块交换协议(Block Exchange Protocol),这两个倒是没啥优劣的问题,主要是BT Sync在老版本的时候支持DHT,而后来删掉了,这也是导致它的官方服务器在被干扰之后几乎完全无法使用的原因之一,所以当初有人说老版本(支持DHT)的依旧能够使用。而Syncthing不一样的是它没有使用DHT,但是也没有像BT Sync一样只有官方服务器(通告+中继服务器),由于开源,所以Syncthing的服务器都是可以自己部署的,这也就是说,即使官方的服务器出了问题,也能够随时有服务器去代替它。
那么为什么要有这两种服务器呢? 这主要是因为P2P的原理,通告(Announcement)/发现(Discovery)服务器用于发现和索引用户,就和你BT的Tracker(这个其实也是通告服务器)一样,你接入了就等于在里面挂了名,然后服务器会把其他人告诉你,这样你们才能够连上。这个是公网IP的情况,如果没有公网IP呢?这就要轮到中继(Relay)服务器出手了,要么是辅助实现打洞,要么是转为C/S模式。总之,中继服务器就是为了在特殊网络环境下(但是在国内很多家庭宽带就是这样的)的正常使用而存在的。
我们本次就不说通告服务器(Syncthing官方其实是叫做Global Discovery服务器的),因为目前官方的服务器还正常运作,不过感兴趣的或者想建立企业内部的本地Discovery服务器可以自己研究下
PS.之前写的Syncthing的搭建和使用——>传送门
二.安装
好了,让我们开始尝试下搭建
首先,你得先确认一点,你搭建的中继服务器是私人(Private)用途的还是公开(Public)的,因为公开的话就会自动加入Syncthing官方的Relay服务器池中,供其他人使用,这样会导致你的流量消耗变大,所以请想好,并且也会在官方的Relay服务器列表中显示
Relay服务器列表——>传送门
如果下面没显示出状态请在地址栏右侧点击允许加载不安全的脚本,因为会从各个服务器上拉取状态,这个是HTTP的,默认会被HTTPS页面禁用
首先来讲一下参数,然后根据你的需求在下面supervisor的配置里面修改
参考了官方文档进行翻译——>传送门
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
|
-debug 启用调试输出
-ext-address=<address> 可选的外部地址(将被上报),能够通过端口转发来监听高权限端口(0-1024)然后外部可以连接这个端口
-global-rate=<bytes/s> 全局限速,单位 bytes/s
-keys=<dir> 用于存储 cert.pem 和 key.pem 的目录,默认是 "."(当前目录)
-listen=<listen addr> 协议监听的地址,默认是 ":22067"
-message-timeout=<duration> 等待消息到达的最大时间(默认 1m0s)
-nat 使用UPnP/NAT-PMP来取得外部端口映射
-nat-lease=<duration> NAT租赁时间,单位分钟(默认 60)
-nat-renewal=<duration> NAT刷新频率,单位分钟(默认 30)
-nat-timeout=<duration> NAT发现超时,单位秒(默认 10)
-network-timeout=<duration> 客户端和中继之间网络操作的超时,如果在这个时间段内客户端和中继之间没有数据被接收到,那么连接将被终止。此外,如果在这段时间内任何被中继的客户端没有数据发送,这个会话也会被终止(默认 2m0s)
-per-session-rate=<bytes/s> 每个会话的限速,单位 bytes/s
-ping-interval=<duration> ping的发送间隔(默认 1m0s)
-pools=<pool addresses> 中继服务器池的地址,使用逗号分隔多个(默认 "http://relays.syncthing.net/endpoint")。留空(-pools "")来禁止公布这个服务器到池中,以便作为私有中继。
-protocol=<string> 监听协议,"tcp"来监听IPv4和IPv6,"tcp4"来监听IPv4,"tcp6"来监听IPv6(默认 "tcp")
-provided-by=<string> 一个可选的描述字段来表示谁提供了这个中继(可以打打广告啥的)
-status-srv=<listen addr> 提供状态服务的监听地址(默认 ":22070"),用于中继服务器池页面来展示服务器状态(传输了多少数据,有多少客户端在线等等),留空(-status-srv="")来禁用这个功能
|
比较重要的是-pools(是否作为公开服务器),以及限速设置啥的,这个看你需要设置,如果公开请务必确保流量足够,另外公开也可以用-provided-by打个网站的小广告
其他系统请自行替换下载链接 https://github.com/syncthing/relaysrv/releases
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
|
#获取程序并解压
wget https://github.com/syncthing/relaysrv/releases/download/v0.14.46/strelaysrv-linux-amd64-v0.14.46.tar.gz
tar xzf strelaysrv-linux-amd64-v0.14.46.tar.gz
#换个地方方便直接运行(顺便改个名)
mv strelaysrv-linux-amd64-v0.14.46/strelaysrv /usr/bin/relaysrv
#清理下
rm -rf strelaysrv-linux-amd64-v0.14.46 strelaysrv-linux-amd64-v0.14.46.tar.gz
#为了安全创建一个单独的用户
useradd relaysrv -s /bin/false
#创建存储配置用的目录并修改所有者
mkdir /etc/relaysrv
chown relaysrv /etc/relaysrv
#安装supervisor
wget https://bootstrap.pypa.io/get-pip.py
python get-pip.py
rm -rf get-pip.py
pip install supervisor
#配置supervisor
echo_supervisord_conf > /etc/supervisord.conf
echo "supervisord" >> /etc/rc.local
cat >>/etc/supervisord.conf<<'EOF'
[program:relaysrv]
command=relaysrv -keys /etc/relaysrv -provided-by="Hi, Senra http://www.senra.me/"
autostart=true
autorestart=true
startsecs=10
stdout_logfile=/var/log/relaysrv.log
stdout_logfile_maxbytes=1MB
stdout_logfile_backups=10
stdout_capture_maxbytes=1MB
redirect_stderr=true
user = relaysrv
EOF
#启动supervisor
supervisord
#查看日志
supervisorctl tail -f relaysrv stdout
|
大概是这样滴
PS.用的人不少,我这篇文章写完放了几天流量跑了相当多……
至于如何在私有模式下使用,你可以看到输出的截图里面有一串类似如下的地址
1
|
relay://<host name|IP>[:port]/?id=<relay device ID>
|
当然这儿是0.0.0.0,你把这个改成你的域名或者IP然后就可以在你的Syncthing里面指定Relay服务器了,改完后地址类似如下
1
|
relay://private-relay-1.example.com:443/?id=ITZRNXE-YNROGBZ-HXTH5P7-VK5NYE5-QHRQGE2-7JQ6VNJ-KZUEDIU-5PPR5AM
|
当然,为了保证能够正常使用,请防火墙开放如下两个端口
数据端口: 22067/tcp 能被 -listen 覆盖指定,并且会被 -ext-address 上报
状态端口: 22070/tcp 能被 -status-srv 覆盖指定
iptables命令如下,其他的自己研究
1
2
|
iptables -I INPUT -p tcp --dport 22067 -j ACCEPT
iptables -I INPUT -p tcp --dport 22070 -j ACCEPT
|
更多内容可以参考下GitHub上的ReadMe说明和上面提到的官方文档 GitHub——>传送门