• rsync


    rysnc

    rsync 是一个远程数据同步工具,可通过 LAN/WAN 快速同步多台主机间的文件。

    rsync 使用所谓的“Rsync 演算法”来使本地和远程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快。

    运行 rsync server 的机器也叫 backup server,一个 rsync server 可同时备份多个 client 的数据;也可以多个rsync server 备份一个 client 的数据。

    rsync 可以搭配 rsh 或 ssh 甚至使用 daemon 模式。rsync server 会打开一个873的服务通道(port),等待对方 Rsync 连接。连接时,rsync server 会检查口令是否相符,若通过口令查核,则可以开始进行文件传输。第一次连通完成时,会把整份文件传输一次,下一次就只传送二个文件之间不同的部份。

    rsync 的基本特点如下:

    可以镜像保存整个目录树和文件系统;
    可以很容易做到保持原来文件的权限、时间、软硬链接等;
    无须特殊权限即可安装;
    优化的流程,文件传输效率高;
    可以使用 rcp、ssh 等方式来传输文件,当然也可以通过直接的 socket 连接(daemon方式)

    支持匿名传输。

    核心算法

    假定在名为 α 和 β 的两台计算机之间同步相似的文件 A 与 B,其中 α 对文件A拥有访问权,β 对文件 B 拥有访问权。并且假定主机 α 与 β 之间的网络带宽很小。那么 Rsync 算法将通过下面的五个步骤来完成:

    1. β 将文件 B 分割成一组不重叠的固定大小为 S 字节的数据块。最后一块可能会比 S 小。
    2. β 对每一个分割好的数据块执行两种校验:一种是32位的滚动弱校验,另一种是128位的 MD4 强校验。
    3. β 将这些校验结果发给 α。
    4. α 通过搜索文件 A 的所有大小为 S 的数据块(偏移量可以任选,不一定非要是 S 的倍数),来寻找与文件B 的某一块有着相同的弱校验码和强校验码的数据块。这项工作可以借助滚动校验的特性很快完成。
    5. α 发给 β 一串指令来生成文件 A 在 β 上的备份。这里的每一条指令要么是对文件 B 经拥有某一个数据块而不须重传的证明,要么是一个数据块,这个数据块肯定是没有与文件 B 的任何一个数据块匹配上的。

    http://rsync.samba.org/how-rsync-works.html

    线上配置/etc/rsyncd.conf 

    uid     = root
    gid     = root
    use chroot      = yes
    max connections = 10
    pid file=/var/run/rsyncd.pid
    list = yes
    
    
    strict modes = no
    hosts allow =10.0.0.0/8 172.16.39.0/24
    模块参数
    [data1]
    path = /data1
    
    [data2]
    path = /data2
    
    [data3]
    path = /data3
    
    [data4]
    path = /data4
    
    [data5]
    path = /data5
    
    [data6]
    path = /data6
    
    [data7]
    path = /data7
    
    [dbatemp]
    path = /data1/dbatemp
    只有该模块对应的目录可以写,其他都只读 read only=no [tmp] path = /tmp
    rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST
    这里的DEST对应rsyncd.conf配置中的module
    

    启动

    rsync默认端口为873,启动方法如下:

    /usr/bin/rsync --daemon

    或者使用启有xinetd超级进程启动

    /etc/init.d/xinetd reload

    查看rsync是否启动

    [root@etch171 mars171 ~]# lsof -i:873
    COMMAND  PID USER   FD   TYPE   DEVICE SIZE NODE NAME
    xinetd  6995 root    5u  IPv4 39343230       TCP *:rsync (LISTEN)

    参考资料

    http://www.cnblogs.com/itech/archive/2010/06/13/1757952.html

  • 相关阅读:
    Java中的char究竟能存中文吗?
    AOP通过反射获取自定义注解
    烂翻译系列之面向.NET开发人员的Dapr——Actors构建块
    烂翻译系列之面向.NET开发人员的Dapr——目录
    烂翻译系列之面向.NET开发人员的Dapr——前言
    烂翻译系列之面向.NET开发人员的Dapr——分布式世界
    烂翻译系列之面向.NET开发人员的Dapr——俯瞰Dapr
    烂翻译系列之面向.NET开发人员的Dapr——入门
    烂翻译系列之面向.NET开发人员的Dapr——总结和前景
    烂翻译系列之面向.NET开发人员的Dapr——机密
  • 原文地址:https://www.cnblogs.com/gsblog/p/3797765.html
Copyright © 2020-2023  润新知