集群分发脚本

rsync介绍

rsync主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点。可以在不同服务器中同步文件。

rsync和scp区别:用rsync做文件的复制要比scp的速度快,rsync只对差异文件做更新。scp是把所有文件都复制过去。

基本语法

rsync -rvl file username@hostname:dir

命令 选项参数 要拷贝的文件路径/名称 目的用户@主机:目的路径/名称

选项参数说明

选项 功能
-r 递归
-v 显示复制过程
-l 拷贝符号连接

封装集群分发脚本

实现功能

将文件分发同步到所有集群

脚本内容

脚本名字随便取,最好见名知意,比如我的就是xrsync

#!/bin/bash
#1 获取输入参数个数,如果没有参数,直接退出
pcount=$#
if((pcount==0)); then
echo no args;
exit;
fi

#2 获取文件名称
p1=$1
fname=`basename $p1`
echo fname=$fname

#3 获取上级目录到绝对路径
pdir=`cd -P $(dirname $p1); pwd`
echo pdir=$pdir

#4 获取当前用户名称
user=`whoami`

#5 循环
for((host=101; host<104; host++));
do
	echo ------------------- hadoop$host --------------
	rsync -rvl $pdir/$fname $user@hadoop$host:$pdir
done

脚本部署

将脚本添加到PATH或放到/usr/local/bin (注意添加可执行权限和更改所有者)

分发脚本

sudo xrsync

输入密码后所有集群都同步拥有此脚本了

你可能感兴趣的:(linux,shell,hadoop,centos)