sersync

1.什么是实 同步

​ 只要当前目录发生变化则会触发一个事件,事件触发后将变换的目录同步到远程服务器。

2.实时同步的原理

​ 实时同步需要借助lnotify通知接口,用来监控本地目录的变化,如果监控本地的目录发生变更。就触发动作,这个动作可以进行实时同步,或者其他操作。

3.实时同步的场景

​ 场景1:解决nfs单点故障。保证同步的数据连续性。

​ 场景2:本地无缝迁移云端。
sersync_第1张图片

4.实时同步工具选择

​ sersync、inotify+rsync,通常我们会选择sersync,sersync是国人基于rssync+inotify基础之上开发的工具,不仅保留了优点同时还强化了实时监控,文件过滤,简化配置等功能,帮助用户提高运行效率,节省时间和网络资源。

5.完整的项目案例

( web + NFS + Sersync + Rsync )

sersync_第2张图片

web服务器的操作:

1.搭建web服务器,部署网盘项目,然后测试上传。

1)创建用户

[root@web01 ~]# groupadd -g 666 www
[root@web01 ~]# useradd -u666 -g666 www

2)安装软件

[root@web01 ~]# yum install httpd php php-mbstring php-gd -y

3)修改httpd.conf的配置,将用户运行的进程修改为www

[root@web01 ~]# sed -i '/^User/c User www' /etc/httpd/conf/httpd.conf
[root@web01 ~]# sed -i '/^Group/c Group www' /etc/httpd/conf/httpd.conf

4)重启Httpd进程

[root@web01 ~]# systemctl restart httpd
[root@web01 ~]# ps aux|grep httpd
root      44986  0.5  1.2 310456 12000 ?        Ss   09:42   0:00 /usr/sbin/httpd -DFOREGROUND
www       44987  0.0  0.6 312540  6396 ?        S    09:42   0:00 /usr/sbin/httpd -DFOREGROUND
www       44988  0.0  0.6 312540  6396 ?        S    09:42   0:00 /usr/sbin/httpd -DFOREGROUND
www       44989  0.0  0.6 312540  6396 ?        S    09:42   0:00 /usr/sbin/httpd -DFOREGROUND
www       44990  0.0  0.6 312540  6396 ?        S    09:42   0:00 /usr/sbin/httpd -DFOREGROUND
www       44991  0.0  0.6 312540  6396 ?        S    09:42   0:00 /usr/sbin/httpd -DFOREGROUND

5)上传代码

[root@web01 ~]# cd /var/www/html/
[root@web01 html]# wget http://static.kodcloud.com/update/download/kodexplorer4.40.zip
[root@web01 html]# unzip kodexplorer4.40.zip
[root@web01 html]# chown -R www.www /var/www/html/

2.捕获上传的静态资源所存放的位置。
/var/www/html/data/User/admin/home

NFS服务器的操作:

1.安装配置NFS服务,将web静态资源存放的位置,挂载至NFS的共享目录中。

1)安装nfs服务端

[root@nfs ~]# yum install nfs-utils -y

2)配置nfs服务端

[root@nfs ~]# cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)

3)创建UID、GID为666的用户

[root@nfs ~]# groupadd -g 666 www
[root@nfs ~]# useradd -u666 -g666 www

4)创建对外共享的目录

( 空间要大,可以是一个新挂载的存储盘 )

[root@nfs ~]# mkdir /data
[root@nfs ~]# chown -R www.www /data

5)重启NFS服务

[root@nfs ~]# systemctl restart nfs

6) 在web节点上,将静态资源目录的数据推送到NFS存储上。

[root@web01 html]# cd /var/www/html/data/User/admin/home/
[root@web01 home]# scp -rp * [email protected]:/data

7) 在web节点上,执行挂载操作。

[root@web01 admin]# mount -t nfs 172.16.1.31:/data /var/www/html/data/User/admin/home/

2.再次进行上传测试,检查上传的资源是否已经成功的写入到NFS存储中。

[root@nfs ~]# ll /data
-rw-r--r-- 1 www www 112114508 4月  17 09:48 05 老男孩教育-标杆班级-NFS总结.mp4
-rw-r--r-- 1 www www 101872284 4月  17 09:57 06 老男孩教育-标杆班级-NFS练习.mp4
drwxr-xr-x 2 www www       210 4月  17 09:46 desktop
drwxr-xr-x 2 www www         6 4月  17 09:46 视频
drwxr-xr-x 2 www www         6 4月  17 09:46 图片
drwxr-xr-x 2 www www         6 4月  17 09:46 我的文档
drwxr-xr-x 2 www www         6 4月  17 09:46 音乐

NFS如果一旦故障,那么资源就会丢失,我们需要给 NFS 增加一个备用节点。

1.需要实时监控NFS的/data目录,一旦发生变化,就马上同步到Backup服务器。 需要在NFS上安装Sersync
2.Backup服务器是不是需要准备一个目录接收NFS推送过来的数据。  /data 目录
3.假设NFS故障,如何快速将Backup顶用起来。需要Backup也做成一个NFS服务端,共享/data目录。

Backup服务器:

1)安装rsync

[root@backup ~]# yum install rsync -y

2)配置rsync

[root@backup ~]# cat /etc/rsyncd.conf
uid = www
gid = www
port = 873
fake super = yes
use chroot = no
max connections = 200
timeout = 600
ignore errors
read only = false
list = false
auth users = rsync_backup
secrets file = /etc/rsync.passwd
log file = /var/log/rsyncd.log
#####################################
[backup]
comment = welcome to oldboyedu backup!
path = /backup

[data]
path = /data

3)根据配置完成对应初始化操作

[root@backup ~]# groupadd -g 666 www
[root@backup ~]# useradd -u 666 -g666 www
[root@backup ~]# mkdir /backup /data
[root@backup ~]# chown -R www.www /backup/ /data/
[root@backup ~]# echo "rsync_backup:123456" > /etc/rsync.passwd
[root@backup ~]# chmod 600 /etc/rsync.passwd

4)重启Rsync服务

[root@backup ~]# systemctl restart rsyncd

5)为backup服务器,启动NFS共享存储服务。

[root@backup ~]# yum install nfs-utils -y
[root@backup ~]# cat /etc/exports
/data 172.16.1.0/24(rw,sync,all_squash,anonuid=666,anongid=666)

[root@backup ~]# systemctl enable nfs
sys[root@backup ~]# systemctl start nfs

配置NFS实时同步

需要监控NFS的/data目录

1.下载并解压sersync软件包
https://github.com/wsgzao/sersync/raw/master/sersync2.5.4_64bit_binary_stable_final.tar.gz

[root@nfs ~]# tar xf sersync2.5.4_64bit_binary_stable_final.tar.gz
[root@nfs ~]# mv GNU-Linux-x86/ /usr/local/sersync
[root@nfs ~]# vim /usr/local/sersync/confxml.xml



    
    
    
    
	
	
	
	
    
    
	
	
	
	
	
	
	
	
    

    
	   
	        
	
		
	    
	    
	    
	    
	    
	
	
	
	    
		
		
	    
	
	
    

    
		
	
	    
	    
	
    

    
	
	    
	
    
    
	
	    
	    
	    
	
    


看文档
/usr/local/sersync/sersync2 -h
set the system param
execute:echo 50000000 > /proc/sys/fs/inotify/max_user_watches
execute:echo 327679 > /proc/sys/fs/inotify/max_queued_events
parse the command param
_______________________________________________________
参数-d:启用守护进程模式
参数-r:在监控前,将监控目录与远程主机用rsync命令推送一遍
c参数-n: 指定开启守护线程的数量,默认为10个
参数-o:指定配置文件,默认使用confxml.xml文件
参数-m:单独启用其他模块,使用 -m refreshCDN 开启刷新CDN模块
参数-m:单独启用其他模块,使用 -m socket 开启socket模块
参数-m:单独启用其他模块,使用 -m http 开启http模块
不加-m参数,则默认执行同步程序


[root@nfs ~]# /usr/local/sersync/sersync2 -dro /usr/local/sersync/confxml.xml

不同步手动试一下
[root@nfs ~]# cd /data && rsync -avz -R --delete ./  --timeout=100 [email protected]::data --password-file=/etc/rsync.pass

解决完杀掉重试试
[root@nfs ~]# ps -ef | grep sersync

NFS故障了,如何实现切换

1.停止nfs服务

[root@nfs ~]# systemctl stop nfs

2.web切换操作

[root@web01 ~]# umount -lf /var/www/html/data/User/admin/home && mount -t nfs 172.16.1.41:/data /var/www/html/data/User/admin/hom	e

你可能感兴趣的:(sersync,linux)