每日课堂笔记day32

rsync复制软件应用与实践

1、什么是rsync？

rsync英文是remote synchronization  缩写是rsync

rsync是开源的、高速的、数据复制工具。

2、rsync 的作用：

工作中需要定时/实时数据备份，本地服务器目录、不同机器、不同机房之间的数据备份。这些都可以用rsync完成。

3、rsync 的功能特性

全量复制：将所有的需要复制的文件重复复制覆盖，浪费时间和资源。

增量复制：只将新增的数据复制，其余数据不变。根据大小属性的变化进行复制。

5、rsync三中工作模式介绍：

1）本地（local）

在local模式下rsync就是一个命令

a、把数据从一个地方复制到另一个地方（仅在一台机器上增量），相当于cp

b、通过加参数实现删除分功能，相当于rm命令。

c、查看属性信息功能，相当于ls。

2)）远程shell模式

借助类似ssh隧道传输数据，适合不同的机器之间复制。

pull（拉）：从远端拉取到本地。

用法：rsync -avz [email protected]:/tmp/dmesg /tmp/

push（推）：从本地推到远端。

用法：rsync -avz /var/log/[email protected]:/tmp/

3）守护进程模式（工作中常用）

首先要搭建服务端（要有守护进程），然后才能在客户端实现推拉数据。

rsync服务模式： *****开启后台进程，接受别人访问。

企业常用组合为：rsync -avz 或者 rsync -vzrtopg

7、rsync守护进程模式应用实践：

配置服务器端守护进程，实现数据传输：

1、服务器端守护进程。

2、客户端执行命令。

用法：

pull（拉）：从远端拉取到本地。

用法：rsync -avz [email protected]::backup /root/ —password-file=/etc/rsync.password 

push（推）：从本地推到远端。

用法：rsync -avz /root/oldboy.txt  [email protected]::backup --password-file=/etc/rsync.password

用法

rsync    [OPTION...]       SRC...     [DEST]

rsync命令 参数选项 [源目录或文件] 目的目录或文件

拷贝用法： rsync /etc/hosts /opt

保持属性拷贝： rsync -zrtopg /etc/hosts /opt/

删除用法： rsync --delete /null.txt /opt/hosts  #让前面null.txt和后面hosts一样

删除目录下所有文件： rsync -r --delete /null/ /opt/      #让后面opt和前面null目录内容保持一致

查看属性：rsync /etc/hosts

2）远程Shell模式

rsync命令参数：

-v, --verbose  显示输出过程

-z, --compress 压缩

-a, --archive  多参数集合(-rtopgDl)

-r, --recursive 递归

-t, --times    保持修改时间属性

-o, --owner    保持属主不变

-p, --perms    保持权限不变

-g, --group    保持用户组不变

-l, --links    保持拷贝软连接

-q, --quiet    安静的拷贝

--bwlimit=KBPS 限制I/O带宽，KBytes per second。

--delete      删除

--exclude      排除

--exclude-from 从文件中排除

企业常用参数组合：-avz或者-vzrtopg

pull,拉取数据：rsync     [OPTION...] [USER@]HOST:SRC...             [DEST]

                        rsync命令 参数选项 [认证用户]@[主机地址]:[源路径] 本地路径

push,推送数据：rsync    [OPTION...]  SRC... [USER@]HOST:[DEST] 

                         rsync命令 参数选项 本地路径 [认证用户]@[主机地址]:[目标路径]

推送例： rsync -avz /etc/hosts [email protected]:/opt/ #加密传输。

拉取例：rsync -avz [email protected]:/opt/hosts /opt

安装后修改rsync的配置文件

配置配置文件/etc/rsyncd.conf

备份

cp /etc/rsyncd.conf{,.ori} ##备份rsync配置文件

cat>/etc/rsyncd.conf<

uid = rsync ##指定虚拟用户rsync

gid = rsync## 指定虚拟用户组rsync

fake super = yes ## 允许非root用户

use chroot = no

max connections = 200 ##最大连接数200

timeout = 600 ##超时计时器600

pid file = /var/run/rsyncd.pid ##pid文件

lock file = /var/run/rsync.lock ##锁文件

log file = /var/log/rsyncd.log ##日志文件

ignore errors ##忽略错误

read only = false ##只读=否

list = false ##列表 =否

hosts allow = 172.16.1.0/24 ##主机允许

hosts deny = 0.0.0.0/32 ## 拒绝除172网段外的主机

auth users = rsync_backup ##授权用户

secrets file = /etc/rsync.password ##密码文件

[backup]## 模块名

path = /backup/ ##路径

EOF

man rsync 查命令的参数

man rsyncd.conf 查配置参数

创建用户和备份目录

创建rsync用户：useradd rsync

创建backup目录：mkdir -p /backup

 修改backup文件的属主：chown -R rsync.rsync /backup/

启动和检查

rsync --daemon（c6及以前）

systemctl start rsyncd

systemctl enable rsyncd

检查端口： netstat -lntup|grep 873 #rsync的服务端口为873

 查看监听端口：lsof -i :873 

面试题：如何查看某端口对应什么服务？答案就是上面两个。

4）配置密码文件

服务端配置/etc/rsync.password  在里面添加rsync_backup:密码

客户端配置/etc/rsync.password 添加 上面的密码

并且将客户端和服务端的·sync.password文件权限改为600

推送到指定模块语法

rsync     [OPTION...] [USER@]HOST::SRC...                  [DEST]

rsync命令 参数选项 [虚拟用户]@[主机地址]::[模块名]      本地路径

例： rsync -avz 要推送的文件全路径 [email protected]::backup --password-file=/etc/rsync.password ##指定密码文件

push,推：从本地推到远端。

从远端模块内拉取 （一般都是用推送）      

rsync     [OPTION...]   [DEST]        [USER@]HOST::SRC...                

rsync命令 参数选项   本地路径      [虚拟用户]@[主机地址]::[模块名]    ]

例： rsync -avz  [email protected]::backup --password-file=/etc/rsync.password  要拉取到的目录##指定密码文件

改完配置，要重启服务