只要当前目录发生变化则会触发一个事件,事件触发后将变换的目录同步到远程服务器。
实时同步需要借助lnotify通知接口,用来监控本地目录的变化,如果监控本地的目录发生变更。就触发动作,这个动作可以进行实时同步,或者其他操作。
场景1:解决nfs单点故障。保证同步的数据连续性。
sersync、inotify+rsync,通常我们会选择sersync,sersync是国人基于rssync+inotify基础之上开发的工具,不仅保留了优点同时还强化了实时监控,文件过滤,简化配置等功能,帮助用户提高运行效率,节省时间和网络资源。
( web + NFS + Sersync + Rsync )
1.搭建web服务器,部署网盘项目,然后测试上传。
[root@web01 ~]# groupadd -g 666 www
[root@web01 ~]# useradd -u666 -g666 www
[root@web01 ~]# yum install httpd php php-mbstring php-gd -y
[root@web01 ~]# sed -i '/^User/c User www' /etc/httpd/conf/httpd.conf
[root@web01 ~]# sed -i '/^Group/c Group www' /etc/httpd/conf/httpd.conf
[root@web01 ~]# systemctl restart httpd
[root@web01 ~]# ps aux|grep httpd
root 44986 0.5 1.2 310456 12000 ? Ss 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44987 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44988 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44989 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44990 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
www 44991 0.0 0.6 312540 6396 ? S 09:42 0:00 /usr/sbin/httpd -DFOREGROUND
[root@web01 ~]# cd /var/www/html/
[root@web01 html]# wget http://static.kodcloud.com/update/download/kodexplorer4.40.zip
[root@web01 html]# unzip kodexplorer4.40.zip
[root@web01 html]# chown -R www.www /var/www/html/
2.捕获上传的静态资源所存放的位置。
/var/www/html/data/User/admin/home
1.安装配置NFS服务,将web静态资源存放的位置,挂载至NFS的共享目录中。
[root@nfs ~]# yum install nfs-utils -y
[root@nfs ~]# cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)
[root@nfs ~]# groupadd -g 666 www
[root@nfs ~]# useradd -u666 -g666 www
( 空间要大,可以是一个新挂载的存储盘 )
[root@nfs ~]# mkdir /data
[root@nfs ~]# chown -R www.www /data
[root@nfs ~]# systemctl restart nfs
[root@web01 html]# cd /var/www/html/data/User/admin/home/
[root@web01 home]# scp -rp * [email protected]:/data
[root@web01 admin]# mount -t nfs 172.16.1.31:/data /var/www/html/data/User/admin/home/
2.再次进行上传测试,检查上传的资源是否已经成功的写入到NFS存储中。
[root@nfs ~]# ll /data
-rw-r--r-- 1 www www 112114508 4月 17 09:48 05 老男孩教育-标杆班级-NFS总结.mp4
-rw-r--r-- 1 www www 101872284 4月 17 09:57 06 老男孩教育-标杆班级-NFS练习.mp4
drwxr-xr-x 2 www www 210 4月 17 09:46 desktop
drwxr-xr-x 2 www www 6 4月 17 09:46 视频
drwxr-xr-x 2 www www 6 4月 17 09:46 图片
drwxr-xr-x 2 www www 6 4月 17 09:46 我的文档
drwxr-xr-x 2 www www 6 4月 17 09:46 音乐
NFS如果一旦故障,那么资源就会丢失,我们需要给 NFS 增加一个备用节点。
1.需要实时监控NFS的/data目录,一旦发生变化,就马上同步到Backup服务器。 需要在NFS上安装Sersync
2.Backup服务器是不是需要准备一个目录接收NFS推送过来的数据。 /data 目录
3.假设NFS故障,如何快速将Backup顶用起来。需要Backup也做成一个NFS服务端,共享/data目录。
[root@backup ~]# yum install rsync -y
[root@backup ~]# cat /etc/rsyncd.conf
uid = www
gid = www
port = 873
fake super = yes
use chroot = no
max connections = 200
timeout = 600
ignore errors
read only = false
list = false
auth users = rsync_backup
secrets file = /etc/rsync.passwd
log file = /var/log/rsyncd.log
#####################################
[backup]
comment = welcome to oldboyedu backup!
path = /backup
[data]
path = /data
[root@backup ~]# groupadd -g 666 www
[root@backup ~]# useradd -u 666 -g666 www
[root@backup ~]# mkdir /backup /data
[root@backup ~]# chown -R www.www /backup/ /data/
[root@backup ~]# echo "rsync_backup:123456" > /etc/rsync.passwd
[root@backup ~]# chmod 600 /etc/rsync.passwd
[root@backup ~]# systemctl restart rsyncd
[root@backup ~]# yum install nfs-utils -y
[root@backup ~]# cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)
[root@backup ~]# systemctl enable nfs
sys[root@backup ~]# systemctl start nfs
需要监控NFS的/data目录
1.下载并解压sersync软件包
https://github.com/wsgzao/sersync/raw/master/sersync2.5.4_64bit_binary_stable_final.tar.gz
[root@nfs ~]# tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz
[root@nfs ~]# mv GNU-Linux-x86/ /usr/local/sersync
[root@nfs ~]# vim /usr/local/sersync/confxml.xml
看文档
/usr/local/sersync/sersync2 -h
set the system param
execute:echo 50000000 > /proc/sys/fs/inotify/max_user_watches
execute:echo 327679 > /proc/sys/fs/inotify/max_queued_events
parse the command param
_______________________________________________________
参数-d:启用守护进程模式
参数-r:在监控前,将监控目录与远程主机用rsync命令推送一遍
c参数-n: 指定开启守护线程的数量,默认为10个
参数-o:指定配置文件,默认使用confxml.xml文件
参数-m:单独启用其他模块,使用 -m refreshCDN 开启刷新CDN模块
参数-m:单独启用其他模块,使用 -m socket 开启socket模块
参数-m:单独启用其他模块,使用 -m http 开启http模块
不加-m参数,则默认执行同步程序
[root@nfs ~]# /usr/local/sersync/sersync2 -dro /usr/local/sersync/confxml.xml
不同步手动试一下
[root@nfs ~]# cd /data && rsync -avz -R --delete ./ --timeout=100 [email protected]::data --password-file=/etc/rsync.pass
解决完杀掉重试试
[root@nfs ~]# ps -ef | grep sersync
1.停止nfs服务
[root@nfs ~]# systemctl stop nfs
2.web切换操作
[root@web01 ~]# umount -lf /var/www/html/data/User/admin/home && mount -t nfs 172.16.1.41:/data /var/www/html/data/User/admin/hom e