rclone工具使用
- 概述
Rclone是一个的命令行工具，支持在不同对象存储，网盘间同步，上传，下载数据。并且通过一些设置可以实现离线下载，服务器备份等非常实用的功能。
- 使用指南
- 登陆服务器，下载rclone
#官方源（推荐）
# wget https://downloads.rclone.org/v1.53.1/rclone-v1.53.1-linux-amd64.rpm
#阿里云epel镜像源
# wget http://mirrors.aliyun.com/epel/7/x86_64/Packages/r/rclone-1.47.0-1.el7.x86_64.rpm
- 安装 rclone
# rpm -ivh rclone-v1.53.1-linux-amd64.rpm
- 配置 rclone
[root@localhost~]# rclone config
rclone config - 进入交互式配置选项，进行添加、删除、管理网盘等操作。详细操作参见：Documentation
rclone config file - 显示配置文件的路径，一般配置文件在 ~/.config/rclone/rclone.conf
rclone config show - 显示配置文件信息
或者直接编写~/.config/rclone/rclone.conf 文件保存也可以
- 参考：增加一个名为[mos]的s3网盘
|
|
[root@sltnode1 ~]# ll ~/.config/rclone/rclone.conf
-rw------- 1 root root 554 Sep 20 11:45 /root/.config/rclone/rclone.conf
- 同步文件
过滤规则：排除目录
如果S3作为业务写入口，则执行如下命令。其中--exclude “{123,bb}/” 表示不同步data桶中123和bbb 这2个目录，按实际需要选择配置。
[root@localhost ~]# rclone copy -P mos:data /mnt/nfs/ --exclude “{123,bb}/”
如果NAS做为业务写入口，则执行如下命令，表示不同步/mnt/nfs目录下的123和bb目录。
[root@localhost ~]# rclone copy -P /mnt/nfs/ mos:data –exclude “{123,bb}/”
过滤规则：包含目录
如果S3作为业务写入口，则执行如下命令。其中--include “{123,bb}/**” 表示同步data桶中123和bbb 这2个目录，按实际需要选择配置。
[root@localhost ~]# rclone copy -P mos:data /mnt/nfs/ --include “{123,bb}/**”
如果NAS做为业务写入口，则执行如下命令，表示同步/mnt/nfs目录下的123和bb目录。
[root@localhost ~]# rclone copy -P /mnt/nfs/ mos:data –include “{123,bb}/**”
匹配到的空目录也在目标端创建（添加--create-empty-src-dirs）
[root@localhost ~]# rclone copy -P /mnt/nfs/ mos:data –include “{123,bb}/**” --create-empty-src-dirs
过滤规则：通配符
如果使用通配符过滤目录则使用如下命令，下面的例子为匹配ccc开头的目录：
[root@localhost ~]# rclone copy -P /mnt/nfs/ mos:data –exclude “{ccc*}/”
或者匹配结尾字段的目录：
[root@localhost ~]# rclone copy -P /mnt/nfs/ mos:data –exclude “{*ffff}/”
增加日志输出：
[root@localhost ~]# rclone copy -Pvv /mnt/nfs/ mos:data –exclude “{*ffff}/” –log-file=/home/rclone.log
命令语法
# 本地到网盘
rclone [功能选项] <本地路径> <网盘名称:路径> [参数] [参数] ...
# 网盘到本地
rclone [功能选项] <网盘名称:路径> <本地路径> [参数] [参数] ...
# 网盘到网盘
rclone [功能选项] <网盘名称:路径> <网盘名称:路径> [参数] [参数] ...
常用功能选项
rclone copy - 复制，只拷贝新文件，源端删除的文件目标端不会删除；
rclone move - 移动，如果要在移动后删除空源目录，请加上 --delete-empty-src-dirs 参数
rclone sync - 同步：将源目录所有文件同步到目标目录，包括删除的文件；
rclone size - 查看网盘文件占用大小。
rclone delete - 删除路径下的文件内容。
rclone purge - 删除路径及其所有文件内容。
rclone mkdir - 创建目录。
rclone rmdir - 删除目录。
rclone rmdirs - 删除指定灵境下的空目录。如果加上 --leave-root 参数，则不会删除根目录。
rclone check - 检查源和目的地址数据是否匹配。
rclone ls - 列出指定路径下的所有的文件以及文件大小和路径。
rclone lsl - 比上面多一个显示上传时间。
rclone lsd 列出指定路径下的目录
rclone lsf - 列出指定路径下的目录和文件
常用参数
-n = --dry-run - 测试运行，用来查看 rclone 在实际运行中会进行哪些操作。
-P = --progress - 显示实时传输进度，500mS 刷新一次，否则默认 1 分钟刷新一次。
--checkers 并行检查文件数量，默认为8
--cache-chunk-size SizeSuffi - 块的大小，默认5M，理论上是越大上传速度越快，同时占用内存也越多。如果设置得太大，可能会导致进程中断。
--cache-chunk-total-size SizeSuffix - 块可以在本地磁盘上占用的总大小，默认10G。
--transfers=N - 并行文件数，默认为4。在比较小的内存的VPS上建议调小这个参数，比如128M的小鸡上使用建议设置为1。
--config string - 指定配置文件路径，string为配置文件路径。
- 设置定时任务定时同步
[root@localhost ~]# crontab -e
*/5 * * * * /usr/bin/ rclone sync -P /mnt/nfs/ s3:data
保存退出。
实例1：每1分钟执行一次command
命令：
* * * * * command
实例2：每小时的第3和第15分钟执行
命令：
3,15 * * * * command
实例3：在上午8点到11点的第3和第15分钟执行
命令：
3,15 8-11 * * * command
实例4：每隔两天的上午8点到11点的第3和第15分钟执行
命令：
3,15 8-11 */2 * * command
实例5：每个星期一的上午8点到11点的第3和第15分钟执行
命令：
3,15 8-11 * * 1 command
实例6：每晚的21:30重启smb
命令：
30 21 * * * /etc/init.d/smb restart
实例7：每月1、10、22日的4 : 45重启smb
命令：
45 4 1,10,22 * * /etc/init.d/smb restart
实例8：每周六、周日的1 : 10重启smb
命令：
10 1 * * 6,0 /etc/init.d/smb restart
实例9：每天18 : 00至23 : 00之间每隔30分钟重启smb
命令：
0,30 18-23 * * * /etc/init.d/smb restart
实例10：每星期六的晚上11 : 00 pm重启smb
命令：
0 23 * * 6 /etc/init.d/smb restart
实例11：每一小时重启smb
命令：
* */1 * * * /etc/init.d/smb restart
实例12：晚上11点到早上7点之间，每隔一小时重启smb
命令：
* 23-7/1 * * * /etc/init.d/smb restart
实例13：每月的4号与每周一到周三的11点重启smb
命令：
0 11 4 * mon-wed /etc/init.d/smb restart
实例14：一月一号的4点重启smb
命令：
0 4 1 jan * /etc/init.d/smb restart
实例15：每小时执行/etc/cron.hourly目录内的脚本
命令：
01 * * * * root run-parts /etc/cron.hourly