小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)

一、概述

Rsync是一个用于在不同计算机之间同步文件和文件夹的工具。它可以在本地计算机和远程服务器之间复制、更新和备份文件。rsync通过比较源和目标文件的差异来最小化传输的数据量,从而提供高效的文件同步功能。

Inotify是Linux内核提供的一种机制,用于监视文件系统事件。通过使用inotify,应用程序可以监视文件或目录的变化,如创建、修改、删除、移动等操作。当文件发生变化时,内核会向应用程序发送通知,应用程序可以根据需要采取相应的操作。

结合使用rsync和inotify,可以实现实时文件同步。当文件发生变化时,inotify会触发通知,然后可以使用rsync来自动同步修改后的文件到指定的目标位置,以保持文件的实时同步和备份。这样可以方便地将文件从一个位置快速同步到另一个位置,而无需手动复制和粘贴文件。

二、工作原理

1、应用程序首先使用inotify监视源文件或目录的变化。这可以通过向inotify API注册一个监视器来实现。

2、当源文件或目录发生变化时,内核会生成相应的inotify事件,并将其发送给应用程序。

3、应用程序接收到inotify事件后,可以根据需要执行相应的操作。在这种情况下,应用程序会启动rsync命令来进行文件同步。

4、rsync根据在源和目标文件之间的差异计算出需要进行传输的数据量,并使用增量传输的方式将修改的文件复制到目标位置。

5、一旦rsync完成文件传输,源文件和目标文件将保持同步,以反映最新的变化。

6、应用程序继续监听inotify事件,等待再次触发,以进行后续的文件同步操作。

三、准备工作

1、两台服务器

2、关闭防火墙

3、两台服务器可以通联

四、rsync常用选项

-a归档模式包含-rlptoD
-v显示详细信息
-z传输进行压缩
-p保留权限
-g保留组标识
-o保留用户标识
--delete:同步数据删除目标源文件数据
--checksum:校验同步数据

五、安装部署rsync

1、服务端安装rsync

yum -y install rsync

vim /etc/rsyncd.conf                   配置文件
uid = nobody                           管理账户
gid = nobody                           管理组
use chroot = yes                       是否禁锢在家目录
address = 192.168.77.111               rsync监听的ip地址
port 873                               端口号
log file = /var/log/rsyncd.log         日志文件存放路径
pid file = /var/run/rsyncd.pid         服务的pid号
hosts allow = 192.168.77.0/24          可以访问的用户
[wwwroot]                              模块名称
path=/var/www/html                     客户端同步的目录
comment = wwwroot                      同步目录数据说明
read only = no                         是否允许只读
dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2  同步的时候哪些后缀不需要压缩
auth users = syh                       同步的用户
secrets file = /etc/rsyncd_users.db    存放同步用户的文件

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第1张图片

vim /etc/rsyncd_users.db    在同步用户的文件中写入用户和密码
syh:123456

 

chmod 600 /etc/rsyncd_users.db    赋予共享用户文件600权限
rsync --daemon                    更新rsync
mkdir -p /var/www/html            创建共享目录
systemctl start rsyncd             启动rsync
netstat -anputl | grep rsync      查看端口是否启动

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第2张图片 

touch /var/www/html/test.txt                   在共享目录中创建测试文件

2、客户端同步

export RSYNC_PASSWORD=123456                                更新全局变量
mkdir html                                                  创建共享目录
rsync -avz --delete [email protected]::wwwroot /root/html  启动同步

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第3张图片

查看是否同步成功

 六、服务器安装部署inotify

使用源码安装:inotify的依赖是gcc

inotify监控类型
create:创建目录或者文件触发同步
move:  移动或者重命名触发同步
delete:删除数据触发同步
modify:修改数据触发同步
attrib:修改文件目录属性触发同步

 由于inotify实时同步是基于ssh实现的所以要配置ssh免密登录

ssh-keygen                                生成密钥
ssh-copy-id  [email protected]          将密钥上传给客户端

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第4张图片

测试免密登录

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第5张图片

编写实时同步脚本
#!/bin/bash
INW="inotifywait -rmq -e MOVE,DELETE,CREATE,ATTRIB /var/www/html"
RSY="rsync -azH --delete /var/www/html/ [email protected]:/root/html"
$INW | while read DIRECTORY EVENT FILE
do
        $RSY
done

第二行表示定义一个变量/var/www/html/发生增加、删除、创建、更新权限
第二行表示定义一个变量表示上传的主机
第三行调用INW变量,并使用while循环当发生INW变量中的情况时将每一行的内容分别存储到DIRECTORY、EVENT和FILE这三个变量中
第四行循环的内容是变量RSY中发生的事件

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第6张图片

 使用sh (脚本名称) & 把脚本放到后台运行

七、测试

在服务器上的共享目录下创建一个测试文件

到客户端的共享目录查看

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第7张图片

再整多点测试文件看看服务是否给力

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第8张图片

到客户端查看(啪一下 很快啊)

小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)_第9张图片

 

以上就是rsync+inotify实时同步文件的操作

如有错误欢迎各位大佬批评指正,我们共同进步

 

 

你可能感兴趣的:(运维)