# 关闭防火墙
 systemctl stop firewalld
 # 
 rpm -q rsync      #一般系统已默认安装rsync
 #建立/etc/rsyncd.conf配置文件
 vim /etc/rsyncd.conf           #添加以下配置项
 uid = root
 gid = root
 use chroot = yes              #禁锢在源目录
 address = 0.0.0.0       #监听地址
 port = 873            #监听端口tcp/udp 873，可通过cat /etc/services | grep rsync查看
 log file = /var/1og/rsyncd.1og     #日志文件位置
 pid file = /var/run/rsyncd.pid     #存放进程ID的文件位置
 hosts allow = 10.50.10.28,10.50.10.170      #允许访问的客户机地址。多个地址以空格分隔
 dont compress = *.gz *.bz2 *.tgz *.zip *.rar *.z  #同步时不再压缩的文件类型
 [r+inotify]                          #共享模块名称
 path = /tmp/etl               #源目录的实际路径
 comment = modify remote path by ninesun    #备注
 read only = no     #是否为只读。yes表示客户端只能读取目录内容，不能写入。只允许下行，不允许上行。 也就是只让录取不让写入。
 auth users = backupuser    #授权账户，多个账号以空格分隔。授权用户，允许读取备份中心的用户名。
 secrets file = /etc/rsyncd_users.db
 #存放授权账户信息的数据文件
 #如采用匿名的方式，只要将其中的“auth users"和“secrets file"配置项去掉即可。
 #为备份账户创建数据文件。
 vim /etc/rsyncd_users.db
 backupuser:123456       #无须建立同名系统用户。
 chmod 600 /etc/rsyncd_users.db
 #保证所有用户对源目录/tmp/etl 都有读取权限
 chmod +r /tmp/etl  
 ls -ld /tmp/etl  
 #启动rsync服务程序
 rsync --daemon     #启动rsync 服务，以独立监听服务的方式(守护进程)运行
 netstat -anpt | grep rsync
 tcp        0      0 0.0.0.0:873             0.0.0.0:*               LISTEN      127452/rsync
 tcp6       0      0 :::873                  :::*                    LISTEN      127452/rsync
 #关闭rsync 服务
 kill $(cat /var/run/rsyncd.pid) 或者使用pkill rsync
 rm -rf /var/run/rsyncd.pid

 [root@localhost ~]# rsync [OPTION] SRC DEST
 [root@localhost ~]# rsync [OPTION] SRC [USER@]HOST:DEST
 [root@localhost ~]# rsync [OPTION] [USER@]HOST:SRC DEST
 [root@localhost ~]# rsync [OPTION] [USER@]HOST::SRC DEST
 [root@localhost ~]# rsync [OPTION] SRC [USER@]HOST::DEST

 #将指定的资源下载到本地/opt目录下进行备份。密码abc123
 格式一: #用户名@主机地址::共享模块名
 rsync -avz backupuser@192.168.132.6::r+inotify /opt/  
 #r+inotify为共享模块名，密码abc123
 #backupuser指的是我在同步的时候用的哪个用户身份，备份服务器可能会备份多个用户的数据，一定要用隔离开来,不相互影响。
 #r+inotify代表的是模块，模块下面会写同步的默认路径和一些特性，所以我们只需要写模块就好了
 #/opt/指的是同步到本地的目录
 # 10.50.10.25 是备份中心服务器.
 格式二: #rsync:/用户名@主机地址/共享模块名  
 rsync -avz rsync://backupuser@10.50.10.25/wwwroot /opt/
 # 免交互格式配置:
 echo "abc123" > /etc/server.pass
 chmod 600 /etc/server.pass    #密码文件权限必须为600，即除了属主，其他人都没有查看权限。
 rsync -avz --password-file=/etc/server.pass backupuser@192.168.132.6::r+inotify /opt/     #免密同步
 #定时同步
 crontab -e
 30 22 * * * /usr/bin/rsync -az --delete --password-file=/etc/server.pass backupuser@192.168.142.10::wwwroot /opt/
 #为了在同步过程中不用输入密码，需要创建一个密码文件，保存backupuser用户的密码，如/etc/server.pass。 在执行rsync 同步时使用选项"--password-file=/etc/server.pass"指定即可。
 systemctl restart crond
 systemctl enable crond

curl -O 10.50.10.25/pigsty/inotify-tools-3.14-9.el7.x86_64.rpm && yum -y install inotify-tools-3.14-9.el7.x86_64.rpm && rm -rf inotify-tools-3.14-9.el7.x86_64.rpm

 vim /etc/ rsyncd. conf
 read only = no   #关闭只读，上行同步需要可以写
 #之后重启
 kill $(cat /var/run/rsyncd.pid)
 rm -rf /var/run/rsyncd.pid
 rsync --daemon  
 netstat -anpt | grep rsync
 #创建一个同步目录，并修改权限
 mkdir /data
 chmod 777 /data

 cat /proc/sys/fs/inotify/max_queued_events
 cat /proc/sys/fs/inotify/max_user_instances
 cat /proc/sys/fs/inotify/max_user_watches
 vim /etc/sysctl.conf    #内核参数都在该文件中修改
 fs.inotify.max_queued_events = 16384
 fs.inotify.max_user_instances = 1024
 fs.inotify.max_user_watches = 1048576
 sysctl -p

# 安装inotify-tools
curl -O 10.50.10.25/pigsty/inotify-tools-3.14-9.el7.x86_64.rpm && yum -y install inotify-tools-3.14-9.el7.x86_64.rpm && rm -rf inotify-tools-3.14-9.el7.x86_64.rpm
 #可以先执行“inotifywait”命令，然后另外再开启一个新终端向 /data 目录下添加文件、移动文件，在原来的终端中跟踪屏幕输出结果。
 inotifywait -mrq -e modify,create,move,delete /data
 #选项“-e”：用来指定要监控哪些事件
 #选项“-m”：表示持续监控
 #选项“-r”：表示递归整个目录
 #选项“-q”：简化输出信息

vi rsync-inotify.sh
#!/bin/bash
#
#********************************************************************
#Author:                ninesun
#Date:          2023年1月12日15:53:04
#FileName：             inotify_rsync.sh
#desc: 这个脚本是在客户端执行，数据实时传输到远程备份中心服务器
#********************************************************************
#可以先执行“inotifywait”命令，然后另外再开启一个新终端向 /data 目录下添加文件、移动文件，在原来的终端中跟踪屏幕输出结果。
#定义inotifywait监控/tmp/data 目录中文件事件的变量。attrib表示属性变化。
#选项“-e”：用来指定要监控哪些事件
#选项“-m”：表示持续监控
#选项“-r”：表示递归整个目录
#选项“-q”：简化输出信息
INOTIFY_CMD="inotifywait -mrq -e modify,create,attrib,move,delete /tmp/data"
 #定义执行 rysnc 上行同步的变量。--delete保证两边目录内容一致，可以不加。
 # --password-file 存储备份中心给你建的账户密码，让你备份你的文件
 # r+inotify 是目标服务器上的/etc/rsyncd.conf配置。如果不配置会报错: ERROR: The remote path must start with a module name not a /
 # :: 代表使用rsync协议传输
 # 如果r+inotify 这个remote pathmodule name是 path=/tmp/etl， 则同步到备份中心服务器的目录结果是/tmp/etl/data
 RSYNC_CMD="rsync -azH --delete --password-file=/tmp/shell/rsync-password/rsync.password /tmp/data backupuser@10.50.10.25::r+inotify"
#使用while、read持续获取监控结果，根据结果可以作进一步判断是否读取到输出的监控记录
$INOTIFY_CMD | while read DATE TIME DIR FILE
do
FILEPATH=${DIR}${FILE}
   #如果rsync未在执行，则立即启动
   if [ $(pgrep rsync | wc -l) -le 0 ];then
        $RSYNC_CMD  && echo "At ${TIME} on ${DATE}, file $FILEPATH was backuped up via rsync" >> /var/log/changelist.log
    # eg: At MODIFY on /tmp/etl/, file b.txt was backuped up via rsync
   fi
done

#!/bin/bash
#
#********************************************************************
#Author:                ninesun
#Date:          2023年1月12日15:53:04
#FileName：             inotify_rsync.sh
#desc: 添加消息队列或缓冲对脚本进行优化
#********************************************************************
INOTIFY_CMD="inotifywait -mrq -e modify,create,attrib,move,delete /tmp/data"
#定义执行 rysnc 上行同步的变量。--delete保证两边目录内容一致，可以不加。
# --password-file 存储备份中心给你建的账户密码，让你备份你的文件
# r+inotify 是目标服务器上的/etc/rsyncd.conf配置。如果不配置会报错: ERROR: The remote path must start with a module name not a /
# :: 代表使用rsync协议传输
# 如果r+inotify 这个remote pathmodule name是 path=/tmp/etl， 则同步到备份中心服务器的目录结果是/tmp/etl/data
RSYNC_CMD="rsync -azH --delete --password-file=/tmp/shell/rsync-password/rsync.password /tmp/data backupuser@10.50.10.25::r+inotify"
#使用while、read持续获取监控结果，根据结果可以作进一步判断是否读取到输出的监控记录
$INOTIFY_CMD | while read DATE TIME DIR FILE; do
   FILEPATH=${DIR}${FILE}
   #小于等于0，则等待它执行完再去同步其他文件
   until [ $(pgrep rsync | wc -l) -le 0 ]; do
      sleep 1
   done
   $RSYNC_CMD && echo "At ${TIME} on ${DATE}, file $FILEPATH was backuped up via rsync" >>/var/log/changelist.log
done

#!/bin/bash
#
#********************************************************************
#Author:                ninesun
#Date:          2023年1月12日15:53:04
#FileName：             inotify_rsync_assign.sh
#********************************************************************
src=/data/rsync
#下面是认证模块
des=r+inotify
#多个IP写法host="10.0.0.105 10.0.0.106" 
# 如果是下行，例如将备份数据分发到多个服务器上时可以这样做.
host="10.50.10.28"
inotifywait -mrq --timefmt '%F %T' --format '%T %w %f' -e modify,delete,create,attrib $src|while read files
do
for hostip in $host
do
rsync -vzH --delete --progress --password-file=/tmp/shell/rsync-password/rsync.password $src backupuser@$hostip::$des
done
echo "${files} was rsynced" >>/tmp/rsync.log 2>&1
done

 #先建立一个空的文件夹：
 mkdir /home/blank
 #用rsync删除目标目录：
 rsync --delete-before -a -H -v --progress --stats /home/blank/ /usr/local/nginx/proxy_temp
 #这样目标目录很快就被清空了

/usr/local/bin/inotifywait -mrq -e modify,delete,create,attrib ${src}
-m 是保持一直监听
-r 是递归查看目录
-q 是打印出事件
-e create,move,delete,modify,attrib 是指 “监听 创建 移动 删除 写入 权限” 事件
/usr/bin/rsync -ahqzt --delete $SRC $DST
-a 存档模式
-h 保存硬连接
-q 制止非错误信息
-z 压缩文件数据在传输
-t 维护修改时间
-delete 删除于多余文件
rsync的完整参数说明：
-v, --verbose 详细模式输出
-q, --quiet 精简输出模式
-c, --checksum 打开校验开关，强制对文件传输进行校验
-a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD
-r, --recursive 对子目录以递归模式处理
-R, --relative 使用相对路径信息
-b, --backup 创建备份，也就是对于目的已经存在有同样的文件名时，将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
--backup-dir 将备份文件(如~filename)存放在在目录下。
-suffix=SUFFIX 定义备份文件前缀
-u, --update 仅仅进行更新，也就是跳过所有已经存在于DST，并且文件时间晚于要备份的文件。(不覆盖更新的文件)
-l, --links 保留软链结
-L, --copy-links 想对待常规文件一样处理软链结
--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结
--safe-links 忽略指向SRC路径目录树以外的链结
-H, --hard-links 保留硬链结
-p, --perms 保持文件权限
-o, --owner 保持文件属主信息
-g, --group 保持文件属组信息
-D, --devices 保持设备文件信息
-t, --times 保持文件时间信息
-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间
-n, --dry-run现实哪些文件将被传输
-W, --whole-file 拷贝文件，不进行增量检测
-x, --one-file-system 不要跨越文件系统边界
-B, --block-size=SIZE 检验算法使用的块尺寸，默认是700字节
-e, --rsh=COMMAND 指定使用rsh、ssh方式进行数据同步
--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息
-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件，用来排除那些不希望传输的文件
--existing 仅仅更新那些已经存在于DST的文件，而不备份那些新创建的文件
--delete 删除那些DST中SRC没有的文件
--delete-excluded 同样删除接收端那些被该选项指定排除的文件
--delete-after 传输结束以后再删除
--ignore-errors 及时出现IO错误也进行删除
--max-delete=NUM 最多删除NUM个文件
--partial 保留那些因故没有完全传输的文件，以是加快随后的再次传输
--force 强制删除目录，即使不为空
--numeric-ids 不将数字的用户和组ID匹配为用户名和组名
--timeout=TIME IP超时时间，单位为秒
-I, --ignore-times 不跳过那些有同样的时间和长度的文件
--size-only 当决定是否要备份文件时，仅仅察看文件大小而不考虑文件时间
--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口，默认为0
-T --temp-dir=DIR 在DIR中创建临时文件
--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份
-P 等同于 --partial
--progress 显示备份过程
-z, --compress 对备份的文件在传输时进行压缩处理
--exclude=PATTERN 指定排除不需要传输的文件模式
--include=PATTERN 指定不排除而需要传输的文件模式
--exclude-from=FILE 排除FILE中指定模式的文件
--include-from=FILE 不排除FILE指定模式匹配的文件
--version 打印版本信息
--address 绑定到特定的地址
--config=FILE 指定其他的配置文件，不使用默认的rsyncd.conf文件
--port=PORT 指定其他的rsync服务端口
--blocking-io 对远程shell使用阻塞IO
-stats 给出某些文件的传输状态
--progress 在传输时现实传输过程
--log-format=formAT 指定日志文件格式
--password-file=FILE 从FILE中得到密码
--bwlimit=KBPS 限制I/O带宽，KBytes per second
-h, --help 显示帮助信息
要排除同步某个目录时，为rsync添加--exculde=PATTERN参数，注意，路径是相对路径，具体查看man rsync。
要排除某个目录的事件监听的处理时，为inotifywait添加--exclude或--excludei参数，具体查看man inotifywait。
# https://blog.csdn.net/MyySophia/article/details/120737154?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522167359930016800184191002%2522%252C%2522scm%2522%253A%252220140713.130102334.pc%255Fblog.%2522%257D&request_id=167359930016800184191002&biz_id=0&utm_medium=distribute.pc_search_result.none-task-blog-2~blog~first_rank_ecpm_v1~rank_v31_ecpm-1-120737154-null-null.blog_rank_default&utm_term=rsync&spm=1018.2226.3001.4450
-v：显示rsync过程中详细信息。可以使用"-vvvv"获取更详细信息。
-P：显示文件传输的进度信息。(实际上"-P"="--partial --progress"，其中的"--progress"才是显示进度信息的)。
-n --dry-run  ：仅测试传输，而不实际传输。常和"-vvvv"配合使用来查看rsync是如何工作的。
-a --archive  ：归档模式，表示递归传输并保持文件属性。等同于"-rtopgDl"。
-r --recursive：递归到目录中去。
-t --times：保持mtime属性。强烈建议任何时候都加上"-t"，否则目标文件mtime会设置为系统时间，导致下次更新
          ：检查出mtime不同从而导致增量传输无效。
-o --owner：保持owner属性(属主)。
-g --group：保持group属性(属组)。
-p --perms：保持perms属性(权限，不包括特殊权限)。
-D        ：是"--device --specials"选项的组合，即也拷贝设备文件和特殊文件。
-l --links：如果文件是软链接文件，则拷贝软链接本身而非软链接所指向的对象。
-z        ：传输时进行压缩提高效率。
-R --relative：使用相对路径。意味着将命令行中指定的全路径而非路径最尾部的文件名发送给服务端，包括它们的属性。
--size-only ：默认算法是检查文件大小和mtime不同的文件，使用此选项将只检查文件大小。
-u --update ：仅在源mtime比目标已存在文件的mtime新时才拷贝。注意，该选项是接收端判断的，不会影响删除行为。
-d --dirs   ：以不递归的方式拷贝目录本身。默认递归时，如果源为"dir1/file1"，则不会拷贝dir1目录，使用该选项将拷贝dir1但不拷贝file1。
--max-size  ：限制rsync传输的最大文件大小。可以使用单位后缀，还可以是一个小数值(例如："--max-size=1.5m")
--min-size  ：限制rsync传输的最小文件大小。这可以用于禁止传输小文件或那些垃圾文件。
--exclude   ：指定排除规则来排除不需要传输的文件。
--delete    ：以SRC为主，对DEST进行同步。多则删之，少则补之。注意"--delete"是在接收端执行的，所以它是在
            ：exclude/include规则生效之后才执行的。
-b --backup ：对目标上已存在的文件做一个备份，备份的文件名后默认使用"~"做后缀。
--backup-dir：指定备份文件的保存路径。不指定时默认和待备份文件保存在同一目录下。
-e          ：指定所要使用的远程shell程序，默认为ssh。
--port      ：连接daemon时使用的端口号，默认为873端口。
--password-file：daemon模式时的密码文件，可以从中读取密码实现非交互式。注意，这不是远程shell认证的密码，而是rsync模块认证的密码。
-W --whole-file：rsync将不再使用增量传输，而是全量传输。在网络带宽高于磁盘带宽时，该选项比增量传输更高效。
--existing  ：要求只更新目标端已存在的文件，目标端还不存在的文件不传输。注意，使用相对路径时如果上层目录不存在也不会传输。
--ignore-existing：要求只更新目标端不存在的文件。和"--existing"结合使用有特殊功能，见下文示例。
--remove-source-files：要求删除源端已经成功传输的文件。