rsync + inotify 实现数据实时同步

rsync + inotify 实现数据实时同步

 

一、系统环境：

CentOS-5.6 -x86_64

更新源服务器：192.168.0.240

目的服务器：192.168.0.241

  

 

二、更新源服务器配置:192.168.0.240(客户端)

 

1、安装inotify-tools

在安装inotify-tools前请先确认你的linux内核是否打到了2.6.13，并且在编译时开启了CONFIG_INOTIFY选项，也可以通过以下命令检测 ls /proc/sys/fs/inotify

 

# lsb_release -a

LSB Version:    :core-4.0-amd64:core-4.0-ia32:core-4.0-noarch:graphics-4.0-amd64:graphics-4.0-ia32:graphics-4.0-noarch:printing-4.0-amd64:printing-4.0-ia32:printing-4.0-noarch

Distributor ID: CentOS

Description:  CentOS release 5.6 (Final)

Release:        5.6

Codename:   Final

 

# uname -r

2.6.18-238.el5

 

# ls /proc/sys/fs/inotify/

max_queued_events  max_user_instances  max_user_watches      如果有此三个文件，表明支持。

 

# wget http://cloud.github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz      下载inotify-tools工具包

# tar xvf inotify-tools-3.14.tar.gz

# cd inotify-tools-3.14       

# ./configure  

# make

# make install

 

2、编写rsync监控脚本

 

# vi /root/rsync.sh

 

#!/bin/sh

host1=192.168.0.241

src=/usr/local/resin-pro-4.0.25/webapps

des1=web1

user1=www1

/usr/local/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format  '%T %w%f' -e modify,delete,create,attrib

 ${src} | while read file

do

rsync -vzrtopg --delete --progress ${src} ${user1}@${host1}::${des1} --password-file=/etc/www1.pwd &&

echo "${files} was rsynced" >> /tmp/rsync.log 2>&1

echo "---------------------------------------------------------------------------"

done

 

# vi /root/rsync1.sh

#!/bin/sh

host1=192.168.0.241

src=/data/www1

des2=web2

user1=www1

/usr/local/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format  '%T %w%f' -e modify,delete,create,attrib

 ${src} | while read file

do

rsync -vzrtopg --delete --progress ${src} ${user1}@${host1}::${des2} --password-file=/etc/www1.pwd &&

echo "${files} was rsynced" >> /tmp/rsync.log 2>&1

echo "---------------------------------------------------------------------------"

done

 

3、建立认证文件 （）

echo "741852" >> /etc/www1.pwd  

chmod 600 /etc/www1.pwd

 

/bin/sh -n /root/rsync.sh  //语法检查  

chmod +x /root/rsync.sh  

nohup sh /root/rsync.sh &  

echo "nohup sh /root/rsync.sh &" >> /etc/rc.local

 

 

三、目的服务器配置:192.168.0.241 (服务端)

 

1、检查rsync是否安装

rpm -qa|grep rsync 

 

2、如果没有发装，执以下命令进行安装

yum -y install rsync 

 

3、定义rsync配置文件/etc/rsyncd.conf

 

# vi /etc/rsyncd.conf

uid = root

gid = root

use chroot = no

max connections = 100

timeout = 600

pid file = /var/run/rsyncd.pid

lock file = /var/run/rsyncd.lock

log file = /var/log/rsyncd.log

 

[web1]      设置认证的模块名

path = /usr/local/resin/          待同步文件的位置

ignore errors

read only = no

list = no

hosts allow = 192.168.0.0/255.255.255.0

auth users = www1     认证用户名,如果没有表示匿名

secrets file = /etc/www1.pwd    认证密码文件放置位置

 

[web2]

path = /data/

ignore errors

read only = no

list = no

hosts allow = 192.168.0.0/255.255.255.0

auth users = www1

secrets file = /etc/www1.pwd

 

4、建立认证文件/etc/www1.pwd ,此文件须与配置文件中指定文件名保持一致

 

此处格式为：username:password,安全问题,并不建议实际使用中使用root用户

192.168.0.241:

echo "www1:741852" >> /etc/www1.pwd

并且我们需要设置此文件的权限为600

chmod 600 /etc/www1.pwd  

chmod 600 /etc/rsyncd.conf

 

5、建立motd文件（可有可无）

 

rsyncd.motd记录了rsync服务的欢迎信息,你可以在其中输入任何文本信息,如：

echo "Welcome to use the rsync services!" >> /var/rsyncd.motd 

 

6、启动rsync

/usr/bin/rsync --daemon   

echo "/usr/bin/rsync --daemon" >> /etc/rc.local

 

 

四、测试

 

在更新源服务器上新建一个文件，运行以下的命令，看文件是否可以正常同步，看有无报错信息

rsync -vzrtopg --delete --progress /data/www1/ [email protected]::web1 --password-file=/etc/www1.pwd 

将要更新的文件提交到更新源服务器中，这样就通过inotify+rsync批量的将更新文件同步到所有的目的服务器中

测试数据同步成功后，在客户端执行以下脚本保证数据实时更新。

nohup sh /root/rsync.sh &