系统管理中 bash shell 脚本常用方法总结

在日常系统管理工作中，需要编写脚本来完成特定的功能，编写shell脚本是一个基本功了！
在编写的过程中，掌握一些常用的技巧和语法就可以完成大部分功能了，也就是2/8原则

1. 单引号和双引号的区别

单引号与双引号的最大不同在于双引号仍然可以引用变量的内容，但单引号内仅是普通字符，不会作变量的引用，直接输出字符窜。请看如下例子：

[root@linux ~]# name=HaHa 
[root@linux ~]# echo $name 
HaHa 
[root@linux ~]# myname="$name is wow" 
[root@linux ~]# echo $myname 
HaHa is wow 
[root@linux ~]# myname='$name is wow' 
[root@linux ~]# echo $myname 
$name is wow 

从上面例子可以看出,使用了单引号的时候，那么$name只是普通字符,直接输出而已！

2. 逐行读取文件

• 使用for循环来读取文件

  for line in `cat file.txt`
  do
  echo $line
  done

注意:由于使用for来读入文件里的行时，会自动把空格和换行符作为一样分隔符，如果行里有空格的时候，输出的结果会很乱，所以只适用于行连续不能有空格或者换行符的文件

• 使用while循环读取文件

  cat file.txt |while read line

  do
  echo $line
  done
  
  或者：
  
  while read line
  do
  echo $line
  done < file.txt

注意:由于使用while来读入文件里的行时，会整行读入，不会关注行的内容(空格..)，所以比for读文件有更好的适用性，推荐使用while循环读取文件

3. bash shell 脚本中常用隐含变量

$0	当前执行的脚本或者命令名称
$1-$9	代表参数的位置. 举例 $1 代表第一个参数.
$#	脚本调用的参数的个数
$@	所有参数的内容
$*	所有参数的内容
$$	当前运行脚本的进程号
$?	命令执行后返回的状态
$!	后台运行的最后一个进程号

注意: $? 用于检查上一个命令执行是否正确(在Linux中，命令退出状态为0表示该命令正确执行，任何非0值表示命令出错) 
$$ 变量最常见的用途是用做暂存文件的名字以保证暂存文件不会重复。 
$* 和 $@ 如果输出是一样的，但是在使用for循环，在使用 双引号("")引用时 "$*" 会输出成一个元素 而 "$@" 会按照每个参数是一个元素方式输出

请看测试例子

#cat test.sh 
#!/bin/sh
echo '"$@" output.....'
for i in "$@"
do
echo $i
done
echo '"$*" output ....'
for i in "$*"
do
echo $i
done

输出结果

#sh test.sh a b c d
"$@" output.....
a
b
c
d
"$*" output ....
a b c d

从输出结果可以看出 "$*" 输出是一行 而 "$@" 输出则是四行

4. 变量内容的删除与替换

我们在一些情况下，需要对变量中的字符窜进行查找删除或者替换，就需要使用下表列出的方法

变量设定方式	说明
${变量#关键字}	若变量内容从头开始的资料符合‘关键字’，则将符合的最短资料删除
${变量##关键字}	若变量内容从头开始的资料符合‘关键字’，则将符合的最长资料删除
${变量%关键字}	若变量内容从尾向前的资料符合‘关键字’，则将符合的最短资料删除
${变量%%关键字}	若变量内容从尾向前的资料符合‘关键字’，则将符合的最长资料删除
${变量/旧字串/新字串}	若变量内容符合‘旧字串’则‘第一个旧字串会被新字串取代
${变量//旧字串/新字串}	若变量内容符合‘旧字串’则‘全部的旧字串会被新字串取代

举例如下(删除字符窜中的某个字符):

[root@linux ~]# export test_str="/usr/kerberos/sbin:/usr/kerberos/bin:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin" 
[root@linux ~]# echo ${test_str#/*kerberos/bin:}
/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin

5. 变量条件测试赋值

在某些时刻我们需要‘判断’某个变量是否存在，若变量存在则将此变量值赋值给新的变量，若变量不存在则将其他值赋值给新的变量.

变量设定方式	str 未定义	str 为空字串	str 已赋值为非空字串
var=${str-expr}	var=expr	var=	var=$str
var=${str:-expr}	var=expr	var=expr	var=$str
var=${str+expr}	var=	var=expr	var=expr
var=${str:+expr}	var=	var=	var=expr
var=${str?expr}	expr 输出至 stderr	var=	var=$str
var=${str:?expr}	expr 输出至 stderr	expr 输出至 stderr	var=$str
var=${str=expr}	var=expr	var=	var=$str
var=${str:=expr}	var=expr	var=expr	var=$str

举例如下:

[root@linux ~]# test_name=""
[root@linux ~]# test_name=${test_name-root}
[root@linux ~]# echo $test_name
<== 因为 test_name 被设定为空字符窜！所以当然还是保留为空字符窜！
[root@linux ~]# test_name=${test_name:-root}
[root@linux ~]# echo $test_name
root <== 加上‘:’后若变量内容为空或者是未设定，都能够以后面的内容替换！

基本上这种变量的测试也能够透过 shell script 内的 if...then... 来处理,不过通过上述提及的简单的方法来测试变量，是程序看起来更精简一些！

6. shell 中分隔符 : 变量IFS 使用

shell脚本中，如果使用for循环一个字符窜的话，默认使用空格来分割字符窜.还有前面所提到的使用for循环逐行读取文件内容时候,文件行中如果有空格的话输出的结果也会变乱.这个时候使用 IFS 变量来设置特定的字符窜分割符来，达到输出正确的目的.默认情况下 IFS 是使用 ， 空格 \t \n 来作为默认的分割符的.

我们将前面使用for逐行读取文件的例子 改进下就可以输出正确了,请看下面

#!/bin/bash
IFS_old=$IFS #将原IFS值保存，以便用完后恢复
IFS=$’\n’ #更改IFS值为$’\n’
for line in `cat file.txt`
do
echo $line
done

file.txt 文件内容如下

[root@linux]$ cat file.txt 
sdfsdfsdfsdf
ssssss ssssss ssssss sssss
sdfsdfsdfsdfsdf

执行测试程序 输出结果如下(正确输出)

[root@linux]$ sh test.sh 
sdfsdfsdfsdf
ssssss ssssss ssssss sssss
sdfsdfsdfsdfsdf

如果未设置IFS变量,使用默认的IFS变量值 ,输出结果如下

[root@linux]$ sh test.sh 
sdfsdfsdfsdf
ssssss
ssssss
ssssss
sssss
sdfsdfsdfsdfsdf

从以上测试程序输出结果,可以根据自己的需求来设定 IFS变量,在举一个例子如下:

while IFS=: read userName passWord userID groupID geCos homeDir userShell
do
echo "$userName -> $homeDir"
done < /etc/passwd

7. shell 数组的使用

数组赋值方式:

(1) array=(var1 var2 var3 ... varN)
(2) array=([0]=var1 [1]=var2 [2]=var3 ... [n]=varN)
(3) array[0]=var1
arrya[1]=var2
...
array[n]=varN

计算数组元素个数或者长度:

(1) ${#array[@]} 
(2) ${#array[*]}

了解了数组基础语法，举例说明，请看:

#!/bin/bash
NAMESERVERS=("ns1.www.net." "ns2.www.net." "ns3.www.net.")
# 得到数组长度
tLen=${#NAMESERVERS[@]}

# 循环数组
for (( i=0; i<${tLen}; i++ ));
do
echo ${NAMESERVERS[$i]}
done

在看一个复杂一点的例子,将文件内容读取到数组中:

#!/bin/bash

# 设置IFS将分割符 设置为 换行符(\n)
OLDIFS=$IFS
IFS=$'\n' 

# 读取文件内容到数组
fileArray=($(cat file.txt))

# restore it
IFS=$OLDIFS
tLen=${#fileArray[@]}

# 循环显示文件内容
for (( i=0; i<${tLen}; i++ ));
do
echo "${fileArray[$i]}"
done

8. 逻辑判断 条件测试

• 文件属性的判断

操作符	测试结果
-e filename	文件存在返回1，否则返回0
-r filename	文件可读返回1,否则返回0
-w filename	文件可写返回1,否则返回0
-x filename	文件可执行返回1,否则返回0
-o filename	文件属于用户本人返回1, 否则返回0
-z filename	文件长度为0返回1, 否则返回0
-f filename	文件为普通文件返回1, 否则返回0
-d filename	文件为目录文件时返回1, 否则返回0

举例如下,测试文件是否存在:

#!/bin/bash
echo "checks the existence of the messages file."
echo -n "Checking..."
if [ -f /var/log/messages ];then
echo "/var/log/messages exists."
fi
echo
echo "...done."

• 字符串比较

操作符	比较结果
str1 = str2	当两个字串相等时为真
str1 != str2	当两个字串不等时为真
-n str1	当字符串的长度大于0时为真
-z str1	当字符串的长度为0时为真
str	当字符串为非空时为真

举例如下,比较字符串来测试用户ID :

if [ "$(whoami)" != 'root' ]; then
echo "You have no permission to run $0 as non-root user."
exit 1;
fi

• 数值比较(整数)

操作符	比较结果
num1 -eq num2	两数相等为真
num1 -ne num2	两数不等为真
num1 -gt num2	num1大于num2为真
num1 -ge num2	num1大于等于num2为真
num1 -lt num2	num1小于num2为真
num1 -le num2	num1小于等于num2为真

举例如下:

num=`wc -l work.txt`
if [ $num -gt 150 ];then
echo "you've worked hard enough for today."
echo
fi

如果要查看详细的测试操作,可以查看man手册 man test