1 概述
本文将通过介绍shell脚本编程过程中常用的一些命令,来提高shell脚本编程的灵活性,以及高效实现编程结果
分别介绍了以下10个工具
shift,select,信号捕捉,数组,字符串处理,定义变量,eval,间接变量引用,mktemp,install
2 shift 控制循环
shift [n]
n 用于将参量列表list 左移指定次数,缺省为左移一次。
参量列表list 一旦被移动,最左端的那个参数就从列表中删除。while 循环遍历位置参量列表时,常用到shift
运行 ./Tshift.sh a b c d 可以看到每次循环$1的值都不一样,而且依次向左移动,参数的个数也不一样
脚本如下:
until (($#==0));do echo "\$1 is $1" echo "var num \$# is $#" shift done
3 select循环与菜单
语法如下
select variable in list
do
循环体命令
done
select 循环主要用于创建菜单,按数字顺序排列的菜单项将显示在标准错误上,并显示PS3 提示符,等待用户输入
用户输入菜单列表中的某个数字,执行相应的命令
用户输入被保存在内置变量REPLY 中
select 是个无限循环,因此要记住用break 命令退出循环,或用exit 命令终止脚本。也可以按ctrl+c 退出循环
select 经常和case 联合使用
与for 循环类似,可以省略in list,此时使用位置参量
脚本如下
注意,如果把注释的#select menu in $@这句话启用,就注释掉菜单那一句,并且执行的时候,要带上参数。
PS3="please input your choice: " select menu in well job hello world bye; #select menu in $@; do case $menu in well) echo "You have done well" ;; job) echo "Nice job" ;; hello) echo "hello world" ;; world) echo "work hard" ;; bye) echo "See U tomorrow" break ;; *) echo "Please re-input" ;; esac done
4 信号捕捉
trap '触发指令' 信号:自定义进程收到系统发出的指定信号后,将执行触发指令,而不会执行原操作
trap '' 信号:忽略信号的操作
trap '-' 信号:恢复原信号的操作
trap -p:列出自定义信号操作
通过执行以下的脚本可以看出效果,ctrl + c 操作时sigint信号
SIGKILL 这个信号不能被捕捉,即-9捕捉不了
测试
当第一个循环的时候,执行kill -2 pid,此时是2信号被忽略,按ctrl+c,脚本不会结束
进入第二个循环前,已经恢复了2的默认信号
在第二个循环的时候,按ctrl+c,脚本结束运行,退出状态码是130.被中断退出。
在第三个循环的时候,自定义了2信号,按ctl+c 或者执行kill -2 pid会打印now catch int 2这句话,同时退出状态码是88
trap '' int echo "pid is $$" echo "now 1 diy trap signal" trap -p i=1 while [ $i -lt 5 ] do sleep 5 echo now i is $i let i++ done trap '-' int echo "now 2 diy trap signal" trap -p j=1 while [ $j -lt 5 ];do echo j is $j let j++ sleep 2 done trap "echo now catch int 2;exit 88" 2 echo "now 3 diy trap signal" trap -p m=1 while [ $m -lt 5 ];do echo m is $m let m++ sleep 3 done echo now $0 done
5 数组
数组可以理解成多个变量的集合,当定义的变量含有多个元素,建议用数组,比较方便
变量:存储单个元素的内存空间
数组:存储多个元素的连续的内存空间,相当于多个变量的集合
数组名和索引
索引:编号从0开始,属于数值索引
注意:索引可支持使用自定义的格式,而不仅是数值格式,即为关联索引,bash4.0版本之后开始支持
bash的数组支持稀疏格式(索引不连续)
声明数组:
declare -a ARRAY_NAME
declare -A ARRAY_NAME
-a定义的是普通的数值,也叫下标数组,下标数组元素是通过数组下标(数组下标可以是算术表达式,其结果必须是一个整数)来访问的,但是这种访问方式在表达某些关联性很强的数据时会存在限制。
-A定义的是关联数组,使用任意的字符串作为下标(不必是整数)来访问数组元素,关联数组的下标和值称为键值对,它们是一一对应的关系。在关联数组中,键是唯一的,值可以不唯一。
shell 的关联数组和 shell 的下标数组在定义和使用上完全一样,只是在索引上有区别。
注意:两者不可相互转换,在使用关联数组之前,需要使用命令 declare -A array 进行显示声明。默认数组定义是-a
5.1 数组赋值
数组元素的赋值
注意,如果定义重复名称的数组,则原来数值的所有值都会被覆盖
只有一次只赋值一个元素,这个定义方式不会覆盖掉整个数组,其他三个方式都会覆盖所有的数组
(1) 一次只赋值一个元素,这个定义方式不会覆盖掉整个数组
ARRAY_NAME[INDEX]=VALUE
weekdays[0]="Sunday"
weekdays[4]="Thursday"
(2) 一次赋值全部元素
ARRAY_NAME=("VAL1" "VAL2" "VAL3" ...)
(3) 只赋值特定元素
ARRAY_NAME=([0]="VAL1" [3]="VAL2" ...)
(4) 交互式数组值对赋值
read -a ARRAY,然后输入参数,用空格隔开,数组定义完成后按enter结束对ARRAY数组的定义
5.2 引用数组
引用数组元素:
${ARRAY_NAME[INDEX]}
注意:省略[INDEX]表示引用下标为0的元素
引用数组所有元素:
${ARRAY_NAME[*]}
${ARRAY_NAME[@]}
数组的长度(数组中元素的个数):
${#ARRAY_NAME[*]}
${#ARRAY_NAME[@]}
删除数组中的某元素:导致稀疏格式
unset ARRAY[INDEX]
如unset sunny[2]
删除整个数组:
unset ARRAY
查看所有数组
显示所有普通数组:declare -a
显示所有关联数组:declare -A
5.3数组数据处理
引用数组中的元素:
数组切片:${ARRAY[@]:offset:number}
offset: 要跳过的元素个数
number: 要取出的元素个数
如: declare -a weekday='([0]="Sun" [1]="Mon" [2]="Tue" [3]="Wen" [4]="Thu")'
echo $[weekday[@]:2:2]
结果是Tue Wen
取偏移量之后的所有元素${ARRAY[@]:offset}
向数组中追加元素:
ARRAY[${#ARRAY[*]}]=value
关联数组:
declare -A ARRAY_NAME ARRAY_NAME=([idx_name1]='val1' [idx_name2]='val2‘...)
5.4 例子
以下两个例子
ex1 找出10个99以内的随机数的最大值和最小值
ex2 计算/var/log/*.log下所有下标是偶数的文件的行数的总和
注意ex2 中
files=(/var/log/*.log)
直接给数组分配了值,用来通配符的写法
#ex1: to find max and min num in ten nums declare -a rand declare -i max=0 declare -i min=32767 for i in {0..9} ; do rand[$i]=$[$RANDOM%99] echo rand[$i]=${rand[$i]} [ ${rand[$i]} -gt $max ] && max=${rand[$i]} [ ${rand[$i]} -lt $min ] && min=${rand[$i]} done echo "MAX:$max min:$min" #ex2:to sum the lines in /var/log/*.log which subscript is even num declare -a files files=(/var/log/*.log) declare -i lines=0 for i in $(seq 0 $[${#files[*]}-1]);do if [ $[$i%2] -eq 0 ];then let lines+=$(wc -l ${files[$i]} | cut -d " " -f1) fi done echo "total lines is $lines"
6 字符串处理
6.1 字符串切片
${var:offset}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,到最后的部分,offset的取值在0 到${#var}-1 之间(bash4.2后,允许为负值)
${var:offset:number}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,长度为number的部分
${var: -length}:取字符串的最右侧几个字符,相当于取最右边
注意:冒号后必须有一空白字符
${var:offset:-length}:从最左侧跳过offset字符,一直向右取到距离最右侧lengh个字符之前的内容,相当于取中间
${var: -length:-offset}:先从最右侧向左取到length个字符开始,再向右取到距离最右侧offset个字符之间的内容,先截断一部分,再取截断后的前面部分
注意:-length前空格
6.2基于模式取子串
${var#*word}:其中word可以是指定的任意字符
功能:自左而右,查找var变量所存储的字符串中,第一次出现的word, 删除字符串开头至第一次出现word字符之间的所有字符
${var##*word}:同上,贪婪模式,不同的是,删除的是字符串开头至最后一次由word指定的字符之间的所有内容
示例:
file="var/log/messages“
${file#*/}: log/messages
${file##*/}: messages
${var%word*}:其中word可以是指定的任意字符;
功能:自右而左,查找var变量所存储的字符串中,第一次出现的word, 删除字符串最后一个字符向左至第一次出现word字符之间的所有字符;
file="/var/log/messages"
${file%/*}: /var/log
${var%%word*}:同上,只不过删除字符串最右侧的字符向左至最后一次出现word字符之间的所有字符;
示例:
url=http://www.magedu.com:80
${url##*:}80
${url%%:*}http
6.3查找替换
${var/pattern/substr}:查找var所表示的字符串中,第一次被pattern所匹配到的字符串,以substr替换之
${var//pattern/substr}: 查找var所表示的字符串中,所有能被pattern所匹配到的字符串,以substr替换之
${var/#pattern/substr}:查找var所表示的字符串中,行首被pattern所匹配到的字符串,以substr替换之
${var/%pattern/substr}:查找var所表示的字符串中,行尾被pattern所匹配到的字符串,以substr替换之
6.4查找并删除
${var/pattern}:删除var所表示的字符串中第一次被pattern所匹配到的字符串
${var//pattern}:删除var所表示的字符串中所有被pattern所匹配到的字符串
${var/#pattern}:删除var所表示的字符串中所有以pattern为行首所匹配到的字符串
${var/%pattern}:删除var所表示的字符串中所有以pattern为行尾所匹配到的字符串
6.5字符大小写转换
${var^^}:把var中的所有小写字母转换为大写
${var,,}:把var中的所有大写字母转换为小写
6.6变量赋值
变量赋值还有以下的写法
以- 减号为标准来看
-当旧变量没有赋值时,新变量为赋值的值
-当旧变量已经有赋值了,新变量就和就变量一样,包括旧变量赋值为空字符串
:-区别就在旧变量为空字符串,新的变量就是赋值的值
其他一样
以- 减号为标准来看
多了:冒号一般就是强制的赋值,作用于当旧变量已经赋予空字符串的时候
-当旧变量没有赋值时,新变量为赋值的值
-当旧变量已经有赋值了,新变量就和就变量一样,包括旧变量赋值为空字符串
:-区别就在旧变量为空字符串,新的变量就是赋值的值
其他一样
+加号特殊,刚好和-减号大概相反的功能
等号和减号差不多,但是,等号会把旧的变量在没有设定的情况下,会把旧的变量也一起赋值,同时,当旧变量是空字符的时候,新变量也是空字符,等号就是,当旧变量没赋值时,新变量为赋值的字段,当旧变量由赋值,等号就是新变量
:=就是旧变量没有赋值时或者空字符时,新旧变量都是赋值的值,但是旧变量由赋值,新变量为旧变量的值。旧变量不变
?比较特殊,会检测旧变量是否存在,旧变量没有赋值,即不存在,就输出错,旧变量已经有赋值,新变量就是旧变量的值,旧变量不变,
:?多了冒号,就是当旧变量也为空字符,也输出错误
7 定义变量类型
Shell变量一般是无类型的,但是bash Shell提供了declare和typeset两个命令用于指定变量的类型,两个命令是等价的
declare [选项] 变量名
-r 声明或显示只读变量
一旦被赋值为只读的变量,那么这个变量将不再被重新赋值或者声明,也不能被取消设置,必须退出当前shell重新登录才能取消变量的赋值或定义
-i将变量定义为整型数
-a 将变量定义为数组
-A 将变量定义为关联数组,下标可以不是数字
-f 显示已定义的所有函数名及其内容
-F 仅显示已定义的所有函数名
-x 声明或显示环境变量和函数
-l 声明变量为小写字母declare –l var=lower
这里会将var这个变量中原来是大写的字母全部转换成小写字母,小写字母不变,var实际被赋予的值不包含大写字母
-u 声明变量为大写字母declare –u var=UPPER
这里会将var这个变量中原来是小写的字母全部转换成大写字母,大写字母不变,var实际被赋予的值不包含小写字母
8 eval命令
eval命令将会首先扫描命令行进行所有的置换,然后再执行该命令。该命令适用于那些一次扫描无法实现其功能的变量.该命令对变量进行两次扫描
示例:
[root@server~]# CMD=whoami [root@server ~]# echo $CMD whoami [root@server ~]# eval $CMD root [root@server~]# n=10 [root@server~]# echo {0..$n} {0..10} [root@server~]# eval echo {0..$n} 0 1 2 3 4 5 6 7 8 9 10
9 间接变量引用
如果第一个变量的值是第二个变量的名字,从第一个变量引用第二个变量的值就称为间接变量引用
variable1的值是variable2,而variable2又是变量名,variable2的值为value,间接变量引用是指通过variable1获得变量值value的行为
variable1=variable2 variable2=value tempvar=$variable1
此时tempvar这个变量的值是variable2,但是要实现间接引用,使得tempvar的值通过variable1可以被赋值value,就是所谓的间接引用
bash Shell提供了两种格式实现间接变量引用
花括号里不能有$号,如果要引用花括号里的变量,就要用!感叹号
eval tempvar=\$$variable1 tempvar=${!variable1}
示例:
[root@server ~]# N=NAME [root@server ~]# NAME=sunny [root@server ~]# N1=${!N} [root@server ~]# echo $N1 sunny [root@server ~]# eval N2=\$$N [root@server ~]# echo $N2 sunny
10 创建临时文件
mktemp命令:创建并显示临时文件,可避免冲突
mktemp[OPTION]... [TEMPLATE]
TEMPLATE: filename.XXX
X至少要出现三个,为大写的字母X
OPTION:
-d: 创建临时目录
-p DIR或--tmpdir=DIR:指明临时文件所存放目录位置
示例:
mktemp/tmp/test.XXX
tmpdir=`mktemp –d /tmp/testdir.XXX`
创建一个临时目录,同时把这个目录的名称赋值给tmpdir这个变量
mktemp --tmpdir=/testdir test.XXXXXX
11 安装复制文件
install命令的作用是安装或升级软件或备份数据,它的使用权限是所有用户。
install命令和cp命令类似,都可以将文件/目录拷贝到指定的地点。但是,install允许你控制目标文件的属性。
install在拷贝的同时制定新生成文件的属性,如制定rwx或者所属组或者所有者的属性
install通常用于程序的makefile,使用它来将程序拷贝到目标(安装)目录。
install命令:
install [OPTION]... [-T] SOURCE DEST 单文件
install [OPTION]... SOURCE... DIRECTORY
install [OPTION]... -t DIRECTORY SOURCE...
install [OPTION]... -d DIRECTORY...创建空目录
选项:
-m MODE,默认755
-o OWNER
-g GROUP
-d 创建新的目录
更多选项查看链接:http://man.linuxde.net/install
示例:
install -m 700 -o wang -g admins srcfile desfile install –m 766 –d /testdir/installdir
12 总结
编写脚本的时候,可以借助以上10个工具在来提高编程的效率。