• rsync应用实例


     

    rsync应用实例,让你的水平进一步提高

    一. 通过ssh的方式

    前面介绍的rsync 5种方式当中,第二、第三(1个冒号)就属于通过ssh的方式,这种方式其实就是让用户去登录到远程机器,然后执行rsync的任务。

    [root@localhost rsync]# rsync -avL test1/ www@192.168.0.101:/tmp/test2/

    www@192.168.0.101's password:

    sending incremental file list

    created directory /tmp/test2

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    sent 327 bytes received 129 bytes 182.40 bytes/sec

    total size is 0 speedup is 0.00

    这种方式就是前面介绍的第二种方式了,是通过ssh拷贝的数据,需要输入192.168.0.101 那台机器www 账户的密码。当然也可以使用第三种方式拷贝:

    [root@localhost rsync]# rsync -avL www@192.168.0.101:/tmp/test2/ ./test3/

    www@192.168.0.101's password:

    receiving incremental file list

    created directory ./test3

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    sent 128 bytes received 351 bytes 38.32 bytes/sec

    total size is 0 speedup is 0.00

    以上两种方式如果写到脚本里,备份起来就有麻烦了,因为要输入密码,脚本本来就是自动的,不可能做到的。但是不代表没有解决办法。

    那就是通过密钥验证,密钥不设立密码就ok了。还记得在前面阿铭曾经介绍过通过密钥登录远程主机吗,下面要讲的内容就是那些东西了。

    在操作之前我们先讲明主机信息: 192.168.0.10 (主机名Aming-1)和 192.168.0.101 (主机名Aming)需要从Aming-1上拷贝数据到Aming上。

    首先确认一下Aming-1上是否有这个文件 /root/.ssh/id_rsa.pub:

    [root@Aming-1 ~]# ssh-keygen

    Generating public/private rsa key pair.

    阿铭之前生成过密钥对,所以这个文件已经存在了,如果你的Linux不存在这个文件,请按照如下方法生成:

    [root@Aming-1 ~]# ssh-keygen

    Generating public/private rsa key pair.

    Enter file in which to save the key (/root/.ssh/id_rsa):

    Enter passphrase (empty for no passphrase):

    Enter same passphrase again:

    Your identification has been saved in /root/.ssh/id_rsa.

    Your public key has been saved in /root/.ssh/id_rsa.pub.

    The key fingerprint is:

    3b:74:af:e8:08:ac:99:30:3f:ef:84:7a:a0:a6:3d:89 root@Aming-1

    在这个过程中会有一些交互的过程,它首先提示要输入这个密钥的密码,出于安全考虑应该定义个密码,但是我们的目的就是为了自动化同步数据。

    所以这里不输入任何密码,直接按回车,即密码为空。最后则生成了私钥(/root/.ssh/id_rsa)和公钥文件(/root/.ssh/id_rsa.pub)

    把公钥文件的内容拷贝到目标机器上:

    [root@Aming-1 ~]# cat .ssh/id_rsa.pub

    ssh-rsa AAAAB3NzaC1yc2EAAAABIwAAAQEA5SPyJ/kliGTAMUan/GCN325VS8jMxvOn4uQoLU/NqBpCI3MrmvSucv6EAzxx1J2uOssW08el06LG+cUwXmm5mkqDRBV6C9qNnR/bVV5vr3QsUwbKPr7fdyJvruQWWR7cSL+mjP0SYmG2Qy2JcM3hl1IZArzC6yeUnq2Gwbax8LgbZE3XfRfOYdimwyh5Tfft7yLYipWc37k+oRUWkI3mW7PalsOlfQhxrLD/lS891y6RdSbGxMJWPoV0KMFbVh+uJgyAXpeuWl+F+/iuQPzb6w3h4pWI31bvbsE9BU82jSzHYEjpq3SN2MJN2vaLs5a0mVpm9zka/h4ITFB8Uy1iSQ== root@Aming-1

    复制主机Aming-1的/root/.ssh/id_rsa.pub文件内容,并粘贴到主机Aming的/home/www/.ssh/authorized_keys中:

    [root@Aming ~]# vim /home/www/.ssh/authorized_keys

    在这一步也许你会遇到/home/www/.ssh目录不存在的问题,可以手动创建,并修改目录权限为700也可以执行ssh-keygen命令生成这个目录。

    保存/home/www/.ssh/authorized_keys文件后,再到主机Aming-1上执行:

    [root@Aming-1 ~]# ssh www@192.168.0.101

    Last login: Wed Jun 12 12:24:34 2013 from 192.168.0.10

    [www@Aming ~]$

    现在不用输入密码也可以登录主机Aming了。下面先从Aming主机退出来,再从主机Aming-1上执行一下rsync命令试试吧。

    [root@Aming-1 ~]# rsync -av rsync/test1/ www@192.168.0.101:/tmp/test4/

    sending incremental file list

    created directory /tmp/test4

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    sent 327 bytes received 129 bytes 912.00 bytes/sec

    total size is 0 speedup is 0.00

    二. 通过后台服务的方式

    这种方式可以理解成这样,在远程主机上建立一个rsync的服务器,在服务器上配置好rsync的各种应用,然后本机作为rsync的一个客户端去连接远程的rsync服务器。下面阿铭就介绍一下,如何去配置一台rsync服务器。

    建立并配置rsync的配置文件 /etc/rsyncd.conf

    [root@Aming-1 ~]# vim /etc/rsyncd.conf

    #port=873

    log file=/var/log/rsync.log

    pid file=/var/run/rsyncd.pid

    #address=192.168.0.10

    [test]

    path=/root/rsync

    use chroot=true

    max connections=4

    read only=no

    list=true

    uid=root

    gid=root

    auth users=test

    secrets file=/etc/rsyncd.passwd

    hosts allow=192.168.0.101

    其中配置文件分为两部分:全部配置部分和模块配置部分,全局部分就是几个参数而已,就像阿铭的rsyncd.conf中port, log file, pid file, address这些都属于全局配置,而[test]以下部分就是模块配置部分了。

    一个配置文件中可以有多个模块,模块名自定义,格式就像阿铭的rsyncd.conf中的这样。其实模块中的一些参数例如use chroot, max connections, udi, gid, auth users, secrets file以及hosts allow都可以配置成全局的参数。

    当然阿铭给出的参数并不是所有的,你可以通过man rsyncd.conf 获得更多信息。下面就简单解释一下这些参数的意义:

    port 指定在哪个端口启动rsyncd服务,默认是873

    log file 指定日志文件

    pid file 指定pid文件,这个文件的作用涉及到服务的启动以及停止等进程管理操作

    address 指定启动rsyncd服务的IP,假如你的机器有多个IP,就可以指定其中一个启动rsyncd服务,默认是在全部IP上启动

    [test] 指定模块名,自定义

    path 指定数据存放的路径

    use chroot true|false 默认是true,意思是在传输文件以前首先chroot到path参数所指定的目录下。这样做的原因是实现额外的安全防护,但是缺点是需要以roots权限,并且不能备份指向外部的符号连接所指向的目录文件。

    默认情况下chroot值为true,如果你的数据当中有软连接文件的话建议设置成false。

    max connections 指定最大的连接数,默认是0即没有限制

    read only ture|false 如果为true则不能上传到该模块指定的路径下

    list 指定当用户查询该服务器上的可用模块时,该模块是否被列出,设定为true则列出,false则隐藏

    uid/gid 指定传输文件时,以哪个用户/组的身份传输

    auth users 指定传输时要使用的用户名

    secrets file 指定密码文件,该参数连同上面的参数如果不指定则不使用密码验证,注意该密码文件的权限一定要是600

    hosts allow 指定被允许连接该模块的主机,可以是IP或者网段,如果是多个,之间用空格隔开

    编辑secrets file,保存后要赋予600权限,如果权限不对,不能完成同步

    [root@Aming-1 ~]# cat /etc/rsyncd.passwd

    test:test123

    [root@Aming-1 ~]# chmod 600 /etc/rsyncd.passwd

    启动rsyncd服务

    [root@Aming-1 ~]# rsync --daemon --config=/etc/rsyncd.conf

    启动后,可以查看一下日志,并查看端口是否启动:

    [root@Aming-1 ~]# cat /var/log/rsync.log

    [root@Aming-1 ~]# netstat -lnp |grep 873

    tcp 0 0 0.0.0.0:873 0.0.0.0:* LISTEN 12066/rsync

    tcp 0 0 :::873 :::* LISTEN 12066/rsync

    如果想开机启动,请把 rsync --daemon --confg=/etc/rsyncd.conf 写入到/etc/rc.d/rc.local文件。

    到另一台机器上测试

    [root@Aming ~]# rsync -avL test@192.168.0.10::test/test1/ /tmp/test5/

    Password:

    receiving incremental file list

    created directory /tmp/test5

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    sent 143 bytes received 354 bytes 994.00 bytes/sec

    total size is 0 speedup is 0.00

    阿铭刚刚提到有一个选项叫做 “use chroot” 默认为true,如果是true,同步的文件中如果有软连接,则会有问题,首先在主机Aming-1的/root/rsync/test1/ 目录下创建一个软连接文件:

    [root@Aming-1 ~]# ln -s /root/test.txt rsync/test1/test.txt

    [root@Aming-1 ~]# ls -l rsync/test1/test.txt

    lrwxrwxrwx 1 root root 14 6月 12 13:24 rsync/test1/test.txt -> /root/test.txt

    然后再到主机Aming上,同步:

    [root@Aming ~]# rsync -avL test@192.168.0.10::test/test1/ /tmp/test6/

    Password:

    receiving incremental file list

    symlink has no referent: "/test1/test.txt" (in test)

    created directory /tmp/test6

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    sent 143 bytes received 419 bytes 1124.00 bytes/sec

    total size is 0 speedup is 0.00

    rsync error: some files/attrs were not transferred (see previous errors) (code

    23) at main.c(1532) [generator=3.0.6]

    可以看到,如果设置 “use chroot” 为true则同步软连接文件会有问题,下面阿铭把主机Aming-1的rsync配置文件修改一下,把true改为false:

    [root@Aming-1 ~]# sed -i 's/use chroot=true/use chroot=false/' /etc/rsyncd.conf

    [root@Aming-1 ~]# grep 'use chroot' /etc/rsyncd.conf

    use chroot=false

    然后再到主机Aming上再次执行同步:

    [root@Aming ~]# rsync -avL test@192.168.0.10::test/test1/ /tmp/test7/

    Password:

    receiving incremental file list

    created directory /tmp/test7

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    test.txt

    sent 162 bytes received 410 bytes 1144.00 bytes/sec

    total size is 0 speedup is 0.00

    这样就没有任何问题啦,你也许会奇怪,为什么阿铭修改完rsyncd.conf配置文件后,没有重启rsyncd服务呢?其实这是rsync的一个特定机制,配置文件时即时生效的,不用重启服务。

    上面的例子中,阿铭都有输入密码,这样同样也不能写入脚本中自动执行,其实这种方式也是可以不用手动输入密码的,它有两种实现方式。

    第一种,指定密码文件

    在客户端上,也就是主机Aming上,编辑一个密码文件:

    [root@Aming ~]# vim /etc/pass

    加入test用户的密码:

    [root@Aming ~]# cat /etc/pass

    test123

    修改密码文件的权限:

    [root@Aming ~]# chmod 600 /etc/pass

    在同步的时候,指定一下密码文件,就可以省去输入密码的步骤了:

    [root@Aming ~]# rsync -avL test@192.168.0.10::test/test1/ /tmp/test8/ --password-file=/etc/pass

    receiving incremental file list

    created directory /tmp/test8

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    test.txt

    sent 190 bytes received 451 bytes 1282.00 bytes/sec

    total size is 0 speedup is 0.00

    第二种:在rsync服务器端不指定用户

    在服务端也就是主机Aming-1上修改配置文件rsyncd.conf, 去掉关于认证账户的配置项(auth user 和 secrets file这两行):

    sed -i 's/auth users/#auth users/;s/secrets file/#secrets file/' /etc/rsyncd.conf

    上面的这个命令是把 “auth users” 和 “secrets file” 两行的最前面加一个 “#”, 这样就把这两行注释掉,使其失去意义。

    在前面阿铭未曾讲过sed的这种用法,其实也不难弄明白,只是用分号把两个替换的子命令块给替换了而已。然后我们再到客户端主机Aming上测试:

    [root@Aming ~]# rsync -avL 192.168.0.10::test/test1/ /tmp/test9/

    receiving incremental file list

    created directory /tmp/test9

    ./

    1

    1.txt

    2

    2.txt

    3

    4

    test.txt

    sent 162 bytes received 410 bytes 1144.00 bytes/sec

    total size is 0 speedup is 0.00

    注意,这里不用再加test这个用户了,默认是以root的身份拷贝的,现在已经不需要输入密码了。

  • 相关阅读:
    管道命令'|' 和xargs find命令找到后把所有找到的删除
    UVa
    【手势交互】9. PS Move
    jquery时间格式化插件
    Android学习路线(十三)Activity生命周期——暂停和恢复(Pausing and Resuming )一个Activity
    hdu 2604 Queuing (矩阵高速幂)
    【Linux驱动】TQ2440 DM9000E网卡驱动移植(Linux-2.6.30.4)
    bzoj2648 SJY摆棋子
    Hive编程指南_学习笔记01
    通信协议中的转义符
  • 原文地址:https://www.cnblogs.com/jiangzhaowei/p/8206596.html
Copyright © 2020-2023  润新知