基于inotify-tools和rsync实现文件实时同步

简介: 基于inotify-tools和rsync实现文件实时同步

前言

  • 系统:centos 7
  • inotify-tools版本:3.14(3.22版本测试有问题,所以找的比较旧的一版)
  • 主机IP:
  • 192.168.137.7(服务端,接收同步文件)
  • 192.168.137.8(客户端,发送同步文件)
  • github下载inotify-tools的源码压缩包
  • 需求:客户端的/home/testpath目录和服务端的/home/testpath同步。客户端目录有变动时,同步复制到服务端
  • 流程逻辑:inotify-tools基于linux的inotify事件,监听文件是否有发生增删改查,如果有,就通过rsync将文件发到另一台服务器。

编译安装inotify

  1. 安装依赖
yum install -y autoconf automake libtool make gcc gcc-c++ make
  1. 客户端解压,编译,安装
tar xf inotify-tools-3.14.tar.gz
cd inotify-tools-3.14
./autogen.sh
./configure --prefix=/home/apps/inotify-tools
make
make install
# inotifywait: 仅执行阻塞,等待inotify事件
# inotifywatch: 收集关于被监视文件系统的统计数据
  1. 两台主机都安装rsync
yum install -y rsync
  1. 服务端编辑rsync配置文件 /etc/rsyncd.conf
uid = root
gid = root
usechroot = no
max connections = 20
timeout = 600
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
[testpath]
path = /home/testpath
ignore errors
read only = false
writeonly = false
list = false
hosts allow = 192.168.137.8
auth users = backuser
secrets file = /etc/rsync.pass
  1. 编辑用户文件 /etc/rsync.pass,编辑完成后修改权限:chmod 600 /etc/rsync.pass
backuser:123
  1. 客户端编辑 /etc/rsync.pass,编辑完成后修改权限:chmod 600 /etc/rsync.pass
123
  1. 客户端测试rsync传输
rsync -a --progress /home/tmp/* backuser@192.168.137.7::testpath --password-file=/etc/rsync.pass
  1. 编辑inotify.sh脚本
#!/bin/bash
# 避免空变量
set -u
# 待同步目录
src=/home/testpath
# 监听修改、删除、添加、改属性事件
/home/apps/inotify-tools/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f' -emodify,delete,create,attrib $src | while read file
do
rsync -zrtopg --progress $src/* backuser@192.168.137.7::testpath --password-file=/etc/rsync.pass
echo "$(date) rsync event occur" >> /home/scripts/inotify.log 2>&1
done
  1. 赋予可执行权限并运行。
chmod +x inotify.sh
./inotify.sh &
  1. 测试两台服务器之间是否能实时同步

补充

  • inotifywait选项
-h: 帮助信息
-m: 接收到事件时不退出。默认接收到一个事件后即退出
-r: 监视一个目录下的所有子目录
-q: 安静模式
-e: 指定监听的事件
-timefmt: 指定时间格式,用于format的%T
--format: 指定输出格式
%T: 时间格式
%f: 发生事件的文件
%w: 发生事件的目录
%e: 发生的事件
  • inotifywait可监听事件,配合-e选项
access: 文件读取
modify: 文件修改
attrib: 文件属性修改,如时间、权限
delete: 文件或目录删除
create: 文件或目录创建
相关文章
|
Java Android开发
2048【小游戏】(Java课设)
2048【小游戏】(Java课设)
469 0
|
应用服务中间件 Shell nginx
|
监控 算法 Linux
使用 Rsync 实现远程同步,以及实时同步
Rsync 全称为:Remote Sync(远程同步),是一款开源的快速备份工具,可以在不同主机间镜像同步整个目录树,支持增量备份,保持链接和权限,采用优化的同步算法,传输前执行压缩,适用于异地备份,镜像服务器等应用(Linux 系统默认安装)
1952 0
使用 Rsync 实现远程同步,以及实时同步
|
关系型数据库 MySQL Linux
CentOS7离线安装MySQL5.7
CentOS7.7离线安装tar包形式的MySQL5.7.33
CentOS7离线安装MySQL5.7
|
缓存 安全 应用服务中间件
nginx配置proxy_set_header
nginx配置proxy_set_header
|
11月前
|
人工智能 安全 API
0 代码为你的 Typecho 博客接入阿里云百炼(可接入 DeepSeek-R1 满血版!)
随着科技企业LLM发展成熟,AIHelper插件让Typecho博客轻松拥有AI助手。通过集成阿里云百炼API,支持DeepSeek-R1、Qwen等模型,帮助读者快速查找内容、总结文章。本文详细介绍了从导出文章、配置阿里云百炼、创建AI应用到安装配置插件的全过程,确保安全高效地为博客添加智能交互功能。相比官方方案,AIHelper提供更安全的访问限制和低代码部署方式,无需编写代码即可实现智能化管理。
0 代码为你的 Typecho 博客接入阿里云百炼(可接入 DeepSeek-R1 满血版!)
|
SQL 分布式计算 DataWorks
DataWorks产品使用合集之如何开发ODPS Spark任务
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
339 2
|
Java Shell Linux
RPM包管理器的JDK
【7月更文挑战第16天】
358 2
|
监控 安全 Unix
Rsync+Inotify实现数据实时同步
Rsync+Inotify实现数据实时同步