1 概述

本文将通过介绍shell脚本编程过程中常用的一些命令,来提高shell脚本编程的灵活性,以及高效实现编程结果

分别介绍了以下10个工具

shift,select,信号捕捉,数组,字符串处理,定义变量,eval,间接变量引用,mktemp,install

2 shift 控制循环

shift [n]

n 用于将参量列表list 左移指定次数,缺省为左移一次。

参量列表list 一旦被移动,最左端的那个参数就从列表中删除。while 循环遍历位置参量列表时,常用到shift

运行  ./Tshift.sh a b c d 可以看到每次循环$1的值都不一样,而且依次向左移动,参数的个数也不一样

脚本如下:

until  (($#==0));do
echo "\$1 is $1"
echo "var num \$# is $#"
shift
done

3 select循环与菜单

语法如下

select variable in list

do

循环体命令

done

select 循环主要用于创建菜单,按数字顺序排列的菜单项将显示在标准错误上,并显示PS3 提示符,等待用户输入

用户输入菜单列表中的某个数字,执行相应的命令

用户输入被保存在内置变量REPLY 中

select 是个无限循环,因此要记住用break 命令退出循环,或用exit 命令终止脚本。也可以按ctrl+c 退出循环

select 经常和case 联合使用

与for 循环类似,可以省略in list,此时使用位置参量

脚本如下

注意,如果把注释的#select menu in $@这句话启用,就注释掉菜单那一句,并且执行的时候,要带上参数。

PS3="please input your choice: "
select menu in well job hello world bye;
#select menu in $@;
do
case $menu in
well)
echo "You have done well"
;;
job)
echo "Nice job"
;;
hello)
echo "hello world"
;;
world)
echo "work hard"
;;
bye)
echo "See U tomorrow"
break
;;
*)
echo "Please re-input"
;;
esac
done

4 信号捕捉

trap '触发指令' 信号:自定义进程收到系统发出的指定信号后,将执行触发指令,而不会执行原操作

trap '' 信号:忽略信号的操作

trap '-' 信号:恢复原信号的操作

trap -p:列出自定义信号操作

通过执行以下的脚本可以看出效果,ctrl + c 操作时sigint信号

SIGKILL 这个信号不能被捕捉,即-9捕捉不了

测试

当第一个循环的时候,执行kill -2 pid,此时是2信号被忽略,按ctrl+c,脚本不会结束

进入第二个循环前,已经恢复了2的默认信号

在第二个循环的时候,按ctrl+c,脚本结束运行,退出状态码是130.被中断退出。

在第三个循环的时候,自定义了2信号,按ctl+c 或者执行kill -2 pid会打印now catch int 2这句话,同时退出状态码是88

trap '' int
echo "pid is $$"
echo "now 1 diy trap signal"
trap -p
i=1
while [ $i -lt 5 ]
do
sleep 5
echo now i is $i
let i++
done
trap '-' int
echo "now 2 diy trap signal"
trap -p
j=1
while [ $j -lt 5 ];do
echo j is $j
let j++
sleep 2
done
trap "echo now catch int 2;exit 88" 2
echo "now 3 diy trap signal"
trap -p
m=1
while [ $m -lt 5 ];do
echo m is $m
let m++
sleep 3
done
echo now $0 done

5 数组

数组可以理解成多个变量的集合,当定义的变量含有多个元素,建议用数组,比较方便

变量:存储单个元素的内存空间

数组:存储多个元素的连续的内存空间,相当于多个变量的集合

数组名和索引

索引:编号从0开始,属于数值索引

注意:索引可支持使用自定义的格式,而不仅是数值格式,即为关联索引,bash4.0版本之后开始支持

bash的数组支持稀疏格式(索引不连续)

声明数组:

declare -a ARRAY_NAME

declare -A ARRAY_NAME

-a定义的是普通的数值,也叫下标数组,下标数组元素是通过数组下标(数组下标可以是算术表达式,其结果必须是一个整数)来访问的,但是这种访问方式在表达某些关联性很强的数据时会存在限制。

-A定义的是关联数组,使用任意的字符串作为下标(不必是整数)来访问数组元素,关联数组的下标和值称为键值对,它们是一一对应的关系。在关联数组中,键是唯一的,值可以不唯一。

shell 的关联数组和 shell 的下标数组在定义和使用上完全一样,只是在索引上有区别。

注意:两者不可相互转换,在使用关联数组之前,需要使用命令 declare -A array 进行显示声明。默认数组定义是-a

5.1 数组赋值

数组元素的赋值

注意,如果定义重复名称的数组,则原来数值的所有值都会被覆盖

只有一次只赋值一个元素,这个定义方式不会覆盖掉整个数组,其他三个方式都会覆盖所有的数组

(1) 一次只赋值一个元素,这个定义方式不会覆盖掉整个数组

ARRAY_NAME[INDEX]=VALUE

weekdays[0]="Sunday"

weekdays[4]="Thursday"

(2) 一次赋值全部元素

ARRAY_NAME=("VAL1" "VAL2" "VAL3" ...)

(3) 只赋值特定元素

ARRAY_NAME=([0]="VAL1" [3]="VAL2" ...)

(4) 交互式数组值对赋值

read -a ARRAY,然后输入参数,用空格隔开,数组定义完成后按enter结束对ARRAY数组的定义

5.2 引用数组

引用数组元素:

${ARRAY_NAME[INDEX]}

注意:省略[INDEX]表示引用下标为0的元素

引用数组所有元素:

${ARRAY_NAME[*]}

${ARRAY_NAME[@]}

数组的长度(数组中元素的个数):

${#ARRAY_NAME[*]}

${#ARRAY_NAME[@]}

删除数组中的某元素:导致稀疏格式

unset ARRAY[INDEX]

如unset sunny[2]

删除整个数组:

unset ARRAY

  查看所有数组

显示所有普通数组:declare -a

  显示所有关联数组:declare -A

5.3数组数据处理

引用数组中的元素:

数组切片:${ARRAY[@]:offset:number}

offset: 要跳过的元素个数

number: 要取出的元素个数

如: declare -a weekday='([0]="Sun" [1]="Mon" [2]="Tue" [3]="Wen" [4]="Thu")'

   echo $[weekday[@]:2:2]

   结果是Tue Wen

取偏移量之后的所有元素${ARRAY[@]:offset}

向数组中追加元素:

ARRAY[${#ARRAY[*]}]=value

关联数组:

declare -A ARRAY_NAME ARRAY_NAME=([idx_name1]='val1' [idx_name2]='val2‘...)

5.4 例子

以下两个例子

ex1 找出10个99以内的随机数的最大值和最小值

ex2 计算/var/log/*.log下所有下标是偶数的文件的行数的总和

注意ex2 中

files=(/var/log/*.log)

直接给数组分配了值,用来通配符的写法

#ex1: to find max and min num in ten nums
declare -a rand
declare -i max=0
declare -i min=32767
for i in {0..9} ; do
    rand[$i]=$[$RANDOM%99]
    echo rand[$i]=${rand[$i]}
    [ ${rand[$i]} -gt $max ] && max=${rand[$i]}
    [ ${rand[$i]} -lt $min ] && min=${rand[$i]}
done
echo "MAX:$max min:$min"


#ex2:to sum the lines in /var/log/*.log which subscript is even num
declare -a files
files=(/var/log/*.log)
declare -i lines=0
for i in $(seq 0 $[${#files[*]}-1]);do
   if [ $[$i%2] -eq 0 ];then
       let lines+=$(wc -l ${files[$i]} | cut -d " "  -f1)
   fi
done

echo "total lines is $lines"

6 字符串处理

6.1 字符串切片

${var:offset}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,到最后的部分,offset的取值在0 ${#var}-1 之间(bash4.2后,允许为负值)

${var:offset:number}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,长度为number的部分

${var:  -length}:取字符串的最右侧几个字符,相当于取最右边

注意:冒号后必须有一空白字符

${var:offset:-length}:从最左侧跳过offset字符,一直向右取到距离最右侧lengh个字符之前的内容,相当于取中间

${var: -length:-offset}:先从最右侧向左取到length个字符开始,再向右取到距离最右侧offset个字符之间的内容,先截断一部分,再取截断后的前面部分

注意:-length前空格

6.2基于模式取子串

${var#*word}:其中word可以是指定的任意字符

功能:自左而右,查找var变量所存储的字符串中,第一次出现的word, 删除字符串开头至第一次出现word字符之间的所有字符

${var##*word}:同上,贪婪模式,不同的是,删除的是字符串开头至最后一次由word指定的字符之间的所有内容

示例:

file="var/log/messages“

${file#*/}: log/messages

${file##*/}: messages

${var%word*}:其中word可以是指定的任意字符;

功能:自右而左,查找var变量所存储的字符串中,第一次出现的word, 删除字符串最后一个字符向左至第一次出现word字符之间的所有字符;

file="/var/log/messages"

${file%/*}: /var/log

${var%%word*}:同上,只不过删除字符串最右侧的字符向左至最后一次出现word字符之间的所有字符;

示例:

url=http://www.magedu.com:80

${url##*:}80

${url%%:*}http

6.3查找替换

${var/pattern/substr}:查找var所表示的字符串中,第一次被pattern所匹配到的字符串,以substr替换之

${var//pattern/substr}: 查找var所表示的字符串中,所有能被pattern所匹配到的字符串,以substr替换之

${var/#pattern/substr}:查找var所表示的字符串中,行首被pattern所匹配到的字符串,以substr替换之

${var/%pattern/substr}:查找var所表示的字符串中,行尾被pattern所匹配到的字符串,以substr替换之

6.4查找并删除

${var/pattern}:删除var所表示的字符串中第一次被pattern所匹配到的字符串

${var//pattern}:删除var所表示的字符串中所有被pattern所匹配到的字符串

${var/#pattern}:删除var所表示的字符串中所有以pattern为行首所匹配到的字符串

${var/%pattern}:删除var所表示的字符串中所有以pattern为行尾所匹配到的字符串

6.5字符大小写转换

${var^^}:把var中的所有小写字母转换为大写

${var,,}:把var中的所有大写字母转换为小写

6.6变量赋值

变量赋值还有以下的写法


以- 减号为标准来看

-当旧变量没有赋值时,新变量为赋值的值

-当旧变量已经有赋值了,新变量就和就变量一样,包括旧变量赋值为空字符串

:-区别就在旧变量为空字符串,新的变量就是赋值的值

其他一样


以- 减号为标准来看

多了:冒号一般就是强制的赋值,作用于当旧变量已经赋予空字符串的时候

-当旧变量没有赋值时,新变量为赋值的值

-当旧变量已经有赋值了,新变量就和就变量一样,包括旧变量赋值为空字符串

:-区别就在旧变量为空字符串,新的变量就是赋值的值

其他一样


+加号特殊,刚好和-减号大概相反的功能

等号和减号差不多,但是,等号会把旧的变量在没有设定的情况下,会把旧的变量也一起赋值,同时,当旧变量是空字符的时候,新变量也是空字符,等号就是,当旧变量没赋值时,新变量为赋值的字段,当旧变量由赋值,等号就是新变量

:=就是旧变量没有赋值时或者空字符时,新旧变量都是赋值的值,但是旧变量由赋值,新变量为旧变量的值。旧变量不变

?比较特殊,会检测旧变量是否存在,旧变量没有赋值,即不存在,就输出错,旧变量已经有赋值,新变量就是旧变量的值,旧变量不变,

:?多了冒号,就是当旧变量也为空字符,也输出错误

7 定义变量类型

Shell变量一般是无类型的,但是bash Shell提供了declare和typeset两个命令用于指定变量的类型,两个命令是等价的

declare [选项] 变量名

-r 声明或显示只读变量

一旦被赋值为只读的变量,那么这个变量将不再被重新赋值或者声明,也不能被取消设置,必须退出当前shell重新登录才能取消变量的赋值或定义

-i将变量定义为整型数

-a 将变量定义为数组

-A 将变量定义为关联数组,下标可以不是数字

-f 显示已定义的所有函数名及其内容

-F 仅显示已定义的所有函数名

-x 声明或显示环境变量和函数

-l 声明变量为小写字母declare –l var=lower

这里会将var这个变量中原来是大写的字母全部转换成小写字母,小写字母不变,var实际被赋予的值不包含大写字母

-u 声明变量为大写字母declare –u var=UPPER

这里会将var这个变量中原来是小写的字母全部转换成大写字母,大写字母不变,var实际被赋予的值不包含小写字母

8 eval命令

eval命令将会首先扫描命令行进行所有的置换,然后再执行该命令。该命令适用于那些一次扫描无法实现其功能的变量.该命令对变量进行两次扫描

示例:

[root@server~]# CMD=whoami
[root@server ~]# echo $CMD
whoami
[root@server ~]# eval $CMD
root
[root@server~]# n=10
[root@server~]# echo {0..$n}
{0..10}
[root@server~]# eval echo {0..$n}
0 1 2 3 4 5 6 7 8 9 10


9 间接变量引用

如果第一个变量的值是第二个变量的名字,从第一个变量引用第二个变量的值就称为间接变量引用

variable1的值是variable2,而variable2又是变量名,variable2的值为value,间接变量引用是指通过variable1获得变量值value的行为

variable1=variable2
variable2=value
tempvar=$variable1

此时tempvar这个变量的值是variable2,但是要实现间接引用,使得tempvar的值通过variable1可以被赋值value,就是所谓的间接引用

bash Shell提供了两种格式实现间接变量引用

花括号里不能有$号,如果要引用花括号里的变量,就要用!感叹号

eval tempvar=\$$variable1
tempvar=${!variable1}

示例:

[root@server ~]# N=NAME
[root@server ~]# NAME=sunny
[root@server ~]# N1=${!N}
[root@server ~]# echo $N1
sunny
[root@server ~]# eval N2=\$$N
[root@server ~]# echo $N2
sunny


10 创建临时文件

mktemp命令:创建并显示临时文件,可避免冲突

mktemp[OPTION]... [TEMPLATE]

TEMPLATE: filename.XXX

X至少要出现三个,为大写的字母X

OPTION:

-d: 创建临时目录

-p DIR或--tmpdir=DIR:指明临时文件所存放目录位置

示例:

mktemp/tmp/test.XXX

tmpdir=`mktemp –d /tmp/testdir.XXX`

创建一个临时目录,同时把这个目录的名称赋值给tmpdir这个变量

mktemp --tmpdir=/testdir test.XXXXXX

11 安装复制文件

install命令的作用是安装或升级软件或备份数据,它的使用权限是所有用户。

install命令和cp命令类似,都可以将文件/目录拷贝到指定的地点。但是,install允许你控制目标文件的属性。

install在拷贝的同时制定新生成文件的属性,如制定rwx或者所属组或者所有者的属性

install通常用于程序的makefile,使用它来将程序拷贝到目标(安装)目录。

install命令:

install [OPTION]... [-T] SOURCE DEST 单文件

install [OPTION]... SOURCE... DIRECTORY

install [OPTION]... -t DIRECTORY SOURCE...

install [OPTION]... -d DIRECTORY...创建空目录

选项:

-m MODE,默认755

-o OWNER

-g GROUP

-d 创建新的目录

更多选项查看链接:http://man.linuxde.net/install

示例:

install -m 700 -o wang -g admins srcfile desfile
install –m 766 –d /testdir/installdir

12 总结

编写脚本的时候,可以借助以上10个工具在来提高编程的效率。