• Linux-Rsync+inotify实时同步


    主机配置
    	OS:centos7.8
    	主IP:192.168.80.15
    	备IP:192.168.80.12
    	
    	关闭firewalld
    		systemctl stop firewalld
    		systemctl disable firewalld
    	关闭selinux
    		sed -i '/SELINUX/{s/enforcing/disabled/}' /etc/selinux/config    #永久关闭
    
    1.Rsync安装:
    	1)安装配置Rsync (备服务器做配置)
    		yum install -y rsync
    	 
    		#修改配置文件
    		vim /etc/rsyncd.conf
    		 
    			uid = rsync
    			gid = rsync
    			fake super = yes
    			use chroot = no
    			max connections = 200
    			pid file = /var/run/rsyncd.pid
    			lock file = /var/run/rsync.lock
    			log file = /var/log/rsyncd.log
    			ignore errors
    			read only = false
    			list = false
    			hosts allow = 192.168.80.0/24
    			hosts deny = 0.0.0.0/32
    			auth users = rsyncweb
    			secrets file = /etc/rsync.password
    			[web]
    			comment = This is web data!
    			path = /data/www
    		 
    		 
    		#创建用户与同步文件目录
    		useradd rsync -s /sbin/nologin -M   #同步用户
    		mkdir /data/www                     #创建文件目录
    		chown rsync.rsync -R /data          #修改文件夹权限
    			 
    		#创建用户rsync同步文件的用户和密码文件。
    		echo "rsyncweb:123456" > /etc/rsync.password    #将用户名密码写入到rsync.password文件
    		chmod 600 /etc/rsync.password                 #修改文件权限为600
    		 
    		#启动rsync
    		systemctl start rsyncd     #启动
    		systemctl enable rsyncd    #开机启动
    
    	2)主服务器安装配置
    
    		安装rsync
    			yum install -y rsync
    			 
    		创建密码文件
    			echo "123456" > /etc/rsync.password   #密码就是服务器端的密码。
    		 
    		修改权限
    			chmod 600 /etc/rsync.password
    
    	3)测试文件同步
    			
    			推送(主服务器上操作)
    				#将主服务器data文件夹下的文件全部推送到备份服务器端。web是rsyncd.conf配置文件下的web。
    				rsync -avzP /data/ rsyncweb@192.168.80.15::web --password-file=/etc/rsync.password
    				 
    				#将主服务器,data文件夹推送到备份服务器端。web是rsyncd.conf配置文件下的web。
    				rsync -avzP /data rsyncweb@192.168.80.15::web --password-file=/etc/rsync.password  
    		 
    			拉取(主服务器上操作)
    				#将备份服务器web=/data/www目录中文件拉取到主服务器/data/www 文件夹中
    				rsync -avz rsyncweb@192.168.80.15::web /data/www --password-file=/etc/rsync.password
    
    
    2.inotify-tools安装(主服务器上配置)
    	1)安装inotify
    		https://sourceforge.net/projects/inotify-tools/files/latest/download    #下载地址。
    		链接:https://pan.baidu.com/s/1HJhGxwbYID4wUm7YtkUXjA   提取码:1234 
    		
    		tar zxvf inotify-tools-3.14.tar.gz
    		cd inotify-tools-3.14
    		./configure --prefix=/usr/local/inotify
    		make && make install
    	
    	2)创建同步脚本
    		mkdir -p /data/script
    		vim /data/script/inotify.sh
    			#!/bin/bash
    			/usr/local/inotify/bin/inotifywait -mrq --format ‘%w%f’ -e create,close_write,delete /data/www/ | while read line
    			do
    			rsync -avz --delete /data/www/ rsync@192.16.16.201::web --password-file=/etc/rsync.password          #此处为rsync同步命令
    			done
    		sh /data/script/inotify.sh &  #后台执行同步脚本。
    		
    	至此实时同步配置完毕。
    	
    	注释:inotify参数说明:
    		/usr/local/inotify/bin/inotifywait #开启实时监控服务(监控文件/目录数据变化)
    		/usr/local/inotify/bin/inotifywatch 统计事件变化次数
    		
    		/usr/local/bin/inotifywait -mrq -e modify,delete,create,attrib ${src}
    		-m 是保持一直监听
    		-r 是递归查看目录
    		-q 是打印出事件
    		-e create,move,delete,modify,attrib 是指 “监听 创建 移动 删除 写入 权限” 事件
    
    		/usr/bin/rsync -ahqzt --delete $SRC $DST
    		-a 存档模式
    		-h 保存硬连接
    		-q 制止非错误信息
    		-z 压缩文件数据在传输
    		-t 维护修改时间
    		-delete 删除于多余文件
    
    		rsync的完整参数说明:
    
    		-v, --verbose 详细模式输出
    		-q, --quiet 精简输出模式
    		-c, --checksum 打开校验开关,强制对文件传输进行校验
    		-a, --archive 归档模式,表示以递归方式传输文件,并保持所有文件属性,等于-rlptgoD
    		-r, --recursive 对子目录以递归模式处理
    		-R, --relative 使用相对路径信息
    		-b, --backup 创建备份,也就是对于目的已经存在有同样的文件名时,将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
    		--backup-dir 将备份文件(如~filename)存放在在目录下。
    		-suffix=SUFFIX 定义备份文件前缀
    		-u, --update 仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件。(不覆盖更新的文件)
    		-l, --links 保留软链结
    		-L, --copy-links 想对待常规文件一样处理软链结
    		--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结
    		--safe-links 忽略指向SRC路径目录树以外的链结
    		-H, --hard-links 保留硬链结
    		-p, --perms 保持文件权限
    		-o, --owner 保持文件属主信息
    		-g, --group 保持文件属组信息
    		-D, --devices 保持设备文件信息
    		-t, --times 保持文件时间信息
    		-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间
    		-n, --dry-run现实哪些文件将被传输
    		-W, --whole-file 拷贝文件,不进行增量检测
    		-x, --one-file-system 不要跨越文件系统边界
    		-B, --block-size=SIZE 检验算法使用的块尺寸,默认是700字节
    		-e, --rsh=COMMAND 指定使用rsh、ssh方式进行数据同步
    		--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息
    		-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件,用来排除那些不希望传输的文件
    		--existing 仅仅更新那些已经存在于DST的文件,而不备份那些新创建的文件
    		--delete 删除那些DST中SRC没有的文件
    		--delete-excluded 同样删除接收端那些被该选项指定排除的文件
    		--delete-after 传输结束以后再删除
    		--ignore-errors 及时出现IO错误也进行删除
    		--max-delete=NUM 最多删除NUM个文件
    		--partial 保留那些因故没有完全传输的文件,以是加快随后的再次传输
    		--force 强制删除目录,即使不为空
    		--numeric-ids 不将数字的用户和组ID匹配为用户名和组名
    		--timeout=TIME IP超时时间,单位为秒
    		-I, --ignore-times 不跳过那些有同样的时间和长度的文件
    		--size-only 当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间
    		--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口,默认为0
    		-T --temp-dir=DIR 在DIR中创建临时文件
    		--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份
    		-P 等同于 --partial
    		--progress 显示备份过程
    		-z, --compress 对备份的文件在传输时进行压缩处理
    		--exclude=PATTERN 指定排除不需要传输的文件模式
    		--include=PATTERN 指定不排除而需要传输的文件模式
    		--exclude-from=FILE 排除FILE中指定模式的文件
    		--include-from=FILE 不排除FILE指定模式匹配的文件
    		--version 打印版本信息
    		--address 绑定到特定的地址
    		--config=FILE 指定其他的配置文件,不使用默认的rsyncd.conf文件
    		--port=PORT 指定其他的rsync服务端口
    		--blocking-io 对远程shell使用阻塞IO
    		-stats 给出某些文件的传输状态
    		--progress 在传输时现实传输过程
    		--log-format=formAT 指定日志文件格式
    		--password-file=FILE 从FILE中得到密码
    		--bwlimit=KBPS 限制I/O带宽,KBytes per second
    		-h, --help 显示帮助信息
    
    		要排除同步某个目录时,为rsync添加--exculde=PATTERN参数,注意,路径是相对路径,具体查看man rsync。
    		要排除某个目录的事件监听的处理时,为inotifywait添加--exclude或--excludei参数,具体查看man inotifywait。
  • 相关阅读:
    HDU 4320 Arcane Numbers 1(质因子包含)
    BZOJ 3673: 可持久化并查集(可持久化并查集+启发式合并)
    Codeforces Beta Round #65 (Div. 2) C. Round Table Knights
    HDU 4496 D-City(逆向并查集)
    HDU 3047 Zjnu Stadium(带权并查集)
    HDU 4104 Discount(n个数不能构成的最小值)
    hihoCoder 1515 分数调查(带权并查集)
    POJ 1733 Parity game(种类并查集)
    Codeforces Round #107 (Div. 1) B. Quantity of Strings(推算)
    CSU 2005 Nearest Maintenance Point(最短路+bitset)
  • 原文地址:https://www.cnblogs.com/qiandong/p/12923250.html
Copyright © 2020-2023  润新知