2019独角兽企业重金招聘Python工程师标准>>> 
Shell脚本学习
Shell变量需要注意的东西
普通变量
1.变量名和等号之间不能有空格
2.变量的命名开头必须是大写或小写字母，变量名只能包含数字、字母和下划线
3.中间不能有空格，可以使用下划线（_）
4. 不能使用标点符号，不能使用bash里的关键字（可用help命令查看保留关键字）
5.使用变量只要在变量名前面加美元符号（$）变量名外面的花括号{}是可选的，加不加都行，加花括号是为了帮助解释器识别变量的边界
6.变量的值可以被重定义，但是在变量定义之后如果添加readonly即变为只读变量则不能重定义
7.用unset+变量名来删除变量
8.变量的作用范围有局部变量，环境变量和shell变量
一些特殊的变量
$ 表示当前Shell进程的ID如echo $$打印出的是当前进程的进程号
$0 当前脚本的文件名
$n 传递给脚本或函数的参数。n 是一个数字，表示第几个参数。例如，第一个参数是 $1，第二个参数是$2。
$# 传递给脚本或函数的参数个数。
$* 传递给脚本或函数的所有参数。
$@ 传递给脚本或函数的所有参数。被双引号(" ")包含时，与 $* 稍有不同，（具体的不同时，不用“”就没什么不同，都是一个一个将参数输出，但加了之后$*会输出为一坨，而后一个则是继续一个一个输出，有个性）
$? 上个命令的退出状态，或函数的返回值。（大部分运行成功为0，不成功则为1，也有其他一些数字表示错误类型）
$$ 当前Shell进程ID。对于 Shell 脚本，就是这些脚本所在的进程ID
Shell替换
字符替换
如果表达式中包含特殊字符，Shell 将会进行替换。例如，在双引号中使用变量就是一种替换，转义字符也是一种替换。
echo -e加个-e表示对变量进行替换，否则会原样输出
\\ 反斜杠
\a 警报，响铃
\b 退格（删除键）
\f 换页(FF)，将当前位置移到下页开头
\n 换行
\r 回车
\t 水平制表符（tab键）
\v 垂直制表符
可以使用 echo 命令的 -E 选项禁止转义，默认也是不转义的；使用 -n 选项可以禁止插入换行符
命令替换
命令替换是指Shell可以先执行命令，将输出结果暂时保存，在适当的地方输出如：变量名=·command·注意是反引号，不是单引号，这个键位于 Esc 键下方，可以用echo调用变量来输出命令的执行结果。
变量替换
变量替换可以根据变量的状态（是否为空、是否定义等）来改变它的值，有以下几种替换，这里的word是指用于输出的字符串，而不是必需为word
${var} 变量本来的值
${var:-word} 如果变量 var 为空或已被删除(unset)，那么返回 word，但不改变 var 的值。
${var:=word} 如果变量 var 为空或已被删除(unset)，那么返回 word，并将 var 的值设置为 word。
${var:?message} 如果变量 var 为空或已被删除(unset)，那么将消息 message 送到标准错 误输出，可以用来检测变量 var 是否可以被正常赋值。
若此替换出现在Shell脚本中，那么脚本将停止运行。
${var:+word} 如果变量 var 被定义，那么返回 word，但不改变 var 的值
Shell运算符
算数运算符
原生bash不支持简单的数学运算，但是可以通过其他命令来实现，例如 awk 和 expr，expr 最常用。expr 是一款表达式计算工具，使用它能完成表达式的求值操作具体的操作如下：
Val=`expr $a +，-，\*,/，% $b`
这里要注意两点
1.表达式和运算符之间要有空格，例如 2+2 是不对的，必须写成 2 + 2，这与我们熟悉的大多数编程语言不一样。
2.完整的表达式要被 ` ` 包含，注意这个字符不是常用的单引号，在 Esc 键下边
条件运算符有三个：=赋值操作 == ！=比较操作（条件表达式要放在方括号之间，并且要有空格，例如 [$a==$b] 是错误的，必须写成 [ $a == $b ]）
关系和布尔运算符
-eq 检测两个数是否相等，相等返回 true。 [ $a -eq $b ] 返回 true。
-ne 检测两个数是否相等，不相等返回 true。 [ $a -ne $b ] 返回 true。
-gt 检测左边的数是否大于右边的，如果是，则返回 true。 [ $a -gt $b ] 返回 false。
-lt 检测左边的数是否小于右边的，如果是，则返回 true。 [ $a -lt $b ] 返回 true。
-ge 检测左边的数是否大等于右边的，如果是，则返回 true。 [ $a -ge $b ] 返回 false。
-le 检测左边的数是否小于等于右边的，如果是，则返回 true。[ $a -le $b ]返回 true。
! 非运算，表达式为 true 则返回 false，否则返回 true。 [ ! false ] 返回 true。
-o 或运算，有一个表达式为 true 则返回 true。 [ $a -lt 20 -o $b -gt 100 ] 返回 true。
-a 与运算，两个表达式都为 true 才返回 true。 [ $a -lt 20 -a $b -gt 100 ] 返回 false
字符串运算符
= 检测两个字符串是否相等，相等返回 true。 [ $a = $b ] 返回 false。
!= 检测两个字符串是否相等，不相等返回 true。 [ $a != $b ] 返回 true。
-z 检测字符串长度是否为0，为0返回 true。 [ -z $a ] 返回 false。
-n 检测字符串长度是否为0，不为0返回 true。 [ -n $a ] 返回 true。
str 检测字符串是否为空，不为空返回 true。 [ $a ] 返回 true。
文件测试运算符
-b file 检测文件是否是块设备文件，如果是，则返回 true。 [ -b $file ] 返回 false。
-c file 检测文件是否是字符设备文件，如果是，则返回 true。 [ -b $file ] 返回 false。
-d file 检测文件是否是目录，如果是，则返回 true。 [ -d $file ] 返回 false。
-f file 检测文件是否是普通文件（既不是目录，也不是设备文件），如果是，则返回 true。 [ -f $file ] 返回 true。
-g file 检测文件是否设置了 SGID 位，如果是，则返回 true。 [ -g $file ] 返回 false。
-k file 检测文件是否设置了粘着位(Sticky Bit)，如果是，则返回 true
[ -k $file ] 返回 false。
-p file 检测文件是否是具名管道，如果是，则返回 true。 [ -p $file ] 返回 false。
-u file 检测文件是否设置了 SUID 位，如果是，则返回 true。 [ -u $file ] 返回 false。
-r file 检测文件是否可读，如果是，则返回 true。 [ -r $file ] 返回 true。
-w file 检测文件是否可写，如果是，则返回 true。 [ -w $file ] 返回 true。
-x file 检测文件是否可执行，如果是，则返回 true。 [ -x $file ] 返回 true。
-s file 检测文件是否为空（文件大小是否大于0），不为空返回 true。
[ -s $file ] 返回 true。
-e file 检测文件（包括目录）是否存在，如果是，则返回 true。 [ -e $file ] 返回 true。
Shell注释
Shell不支持多行注释所以要一行一行的注释用#代码块可以用{}括起来要用的时候再去掉。
Shell字符串与数组
字符串
字符串可以用单引号或双引号，但区别在于单引号：
单引号里的任何字符都会原样输出，单引号字符串中的变量是无效的；
单引号字串中不能出现单引号（对单引号使用转义符后也不行）
双引号：双引号里可以有变量
双引号里可以出现转义字符
字符串的拼接如echo $str1 $str2
字符串的长度如echo $ {# str}
字符串的截取如echo $ {str：1：6}即输出下标为1到6的字符
字符串的查找如 echo `expr index "$string" is` （不懂）
数组
bash支持一维数组（不支持多维数组），并且没有限定数组的大小并且是从0开始的
在Shell中，用括号来表示数组，数组元素用“空格”符号分割开。定义数组的一般形式为：
array_name=(value1 ... valuen)
也可以单独定义各个分量 array_name[0]=value0
array_name[1]=value1
array_name[2]=value2
读取数组元素值的一般格式是： ${array_name[index]}
使用@ 或 * 可以获取数组中的所有元素如： ${array_name[*]} ； ${array_name[@]}
获取数组的长度 length=${#array_name[@]} 或Length=${#array_name[*]}
获取单个元素的长度 lengthn=${#array_name[n]}
Shell的echo和printf命令
Echo命令
Echo指令就是一个内部输出指令但是要输出原样字符串不进行转义就需要添加单引号如：echo '$name\"'
Printf命令
Printf主要用于格式化输出 printf 不像 echo 那样会自动换行，必须显式添加换行符(\n)。
printf 命令的语法：
printf format-string [arguments...]
format-string 为格式控制字符串，arguments 为参数列表。
举个栗子：# 如果没有 arguments，那么 %s 用NULL代替，%d 用 0 代替
$ printf "%s and %d \n"
and 0
# 如果以 %d 的格式来显示字符串，那么会有警告，提示无效的数字，此时默认置为 0
$ printf "The first program always prints'%s,%d\n'" Hello Shell
-bash: printf: Shell: invalid number
The first program always prints 'Hello,0'
Shell条件执行语句
Shell的if..else..fi语句
if 语句通过关系运算符判断表达式的真假来决定执行哪个分支。Shell 有三种 if ... else 语句：
if ... fi 语句；
if ... else ... fi 语句；
if ... elif ... else ... fi 语句。
注意：if [ expression ] 如果 expression 返回 true，then 后边的语句将会被执行；如果返回 false，不会执行任何语句。
最后必须以 fi 来结尾闭合 if，fi 就是 if 倒过来拼写，后面也会遇见。
expression 和方括号([ ])之间必须有空格，否则会有语法错误
Shell case esac语句
case ... esac 与其他语言中的 switch ... case 语句类似，是一种多分枝选择结构如下：
echo 'Input a number between 1 to 4'
echo 'Your number is:\c'
read aNum #这个是取值
case $aNum in
1) echo 'You select 1' #期间可以有多条指令，当条件符合后一直执行到；；处。
;;
2) echo 'You select 2'
;;
3) echo 'You select 3'
;;
4) echo 'You select 4'
;;
*) echo 'You do not select a number between 1 to 4'
;;
Esac
注意：取值后面必须为关键字 in，每一模式必须以右括号结束。取值可以为变量或常数。匹配发现取值符合某一模式后，其间所有命令开始执行直至 ;;。;; 与其他语言中的 break 类似，意思是跳到整个 case 语句的最后。
一旦模式匹配，则执行完匹配模式相应命令后不再继续其他模式。如果无一匹配模式，使用星号 * 捕获该值，再执行后面的命令
Shell的循环语句
Shell的for循环
For循环的格式
for 变量 in 列表
do
command1
command2
...
commandN
done
列表是一组值（数字、字符串等）组成的序列，每个值通过空格分隔。每循环一次，就将列表中的下一个值赋给变量。
in 列表是可选的，如果不用它，for 循环使用命令行的位置参数。
Shell的while循环
while循环用于不断执行一系列命令，也用于从输入文件中读取数据；命令通常为测试条件。其格式为：
while command
do
Statement(s) to be executed if command is true
done
命令执行完毕，控制返回循环顶部，从头开始直至测试条件为假。
Shell的until循环
until 循环执行一系列命令直至条件为 true 时停止。until 循环与 while 循环在处理方式上刚好相反。一般while循环优于until循环，但在某些时候，也只是极少数情况下，until 循环更加有用。
until 循环格式为：
until command
do
Statement(s) to be executed until command is true
done
command 一般为条件表达式，如果返回值为 false，则继续执行循环体内的语句，否则跳出循环
Shell退出循环
break命令允许跳出所有循环（终止执行后面的所有循环）
在嵌套循环中，break 命令后面还可以跟一个整数，表示跳出第几层循环。例如：
break n
表示跳出第 n 层循环。循环是有内往外的即当前循环是第一层
continue命令与break命令类似，只有一点差别，它不会跳出所有循环，仅仅跳出当前循环。
同样，continue 后面也可以跟一个数字，表示跳出第几层循环。
Shell函数
函数
Shell 函数必须先定义后使用。
Shell 函数的定义格式如下：
function_name () {
list of commands
[ return value ]
}
如果你愿意，也可以在函数名前加上关键字 function：
function function_name () {
list of commands
[ return value ]
}
函数返回值，可以显式增加return语句；如果不加，会将最后一条命令运行结果作为返回值。
Shell 函数返回值只能是整数，一般用来表示函数执行成功与否，0表示成功，其他值表示失败。如果 return 其他数据，比如一个字符串，往往会得到错误提示：“numeric argument required”。
如果一定要让函数返回字符串，那么可以先定义一个变量，用来接收函数的计算结果，脚本在需要的时候访问这个变量来获得函数返回值
调用函数只需要给出函数名，不需要加括号。
像删除变量一样，删除函数也可以使用 unset 命令，不过要加上 .f 选项，如下所示：
$unset .f function_name
如果你希望直接从终端调用函数，可以将函数定义在主目录下的 .profile 文件，这样每次登录后，在命令提示符后面输入函数名字就可以立即调用
函数的参数
在Shell中，调用函数时可以向其传递参数。在函数体内部，通过 $n 的形式来获取参数的值，例如，$1表示第一个参数，$2表示第二个参数...如：
funWithParam(){
echo "The value of the first parameter is $1 !"
echo "The value of the second parameter is $2 !"
echo "The value of the tenth parameter is $10 !"
echo "The value of the tenth parameter is ${10} !"
echo "The value of the eleventh parameter is ${11} !"
echo "The amount of the parameters is $# !" # 参数个数
echo "The string of the parameters is $* !" # 传递给函数的所有参数
}
funWithParam 1 2 3 4 5 6 7 8 9 34 73
$10 不能获取第十个参数，获取第十个参数需要${10}。当n>=10时，需要使用${n}来获取参数 当取$10 则表示$ {1}0即为第一个数与0的拼接，其他参数见特殊参数。
Shell的输入输出重定向
标准重定向
Unix 命令默认从标准输入设备(stdin)获取输入，将结果输出到标准输出设备(stdout)显示。一般情况下，标准输入设备就是键盘，标准输出设备就是终端，即显示器。 命令的输出不仅可以是显示器，还可以很容易的转移向到文件，这被称为输出重定向
Command > file 将输出重定向到 file。
command < file 将输入重定向到 file。
command >> file 将输出以追加的方式重定向到 file。
n > file 将文件描述符为 n 的文件重定向到 file。
n >> file 将文件描述符为 n 的文件以追加的方式重定向到 file。
n >& m 将输出文件 m 和 n 合并。
n <& m 将输入文件 m 和 n 合并。
<< tag 将开始标记 tag 和结束标记 tag 之间的内容作为输入
注意的几点：
标准输入文件(stdin)：stdin的文件描述符为0，Unix程序默认从stdin读取数据。
标准输出文件(stdout)：stdout 的文件描述符为1，Unix程序默认向stdout输出数据。
标准错误文件(stderr)：stderr的文件描述符为2，Unix程序会向stderr流中写入错误信息。
如果希望 stderr 重定向到 file，可以这样写：
$command 2 > file或者追加到文件尾则用$command 2 >> file 如果用>默认对文件覆盖
如果希望将 stdout 和 stderr 合并后重定向到 file，可以这样写：
$command > file 2>&1或$command >> file 2>&1
如果希望对 stdin 和 stdout 都重定向，可以这样写：
$command < file1 >file2
Here document嵌入文档
Here Document 是 Shell 中的一种特殊的重定向方式，它的基本的形式如下：
command << delimiter (界定符可以为任意字符)
document
delimiter
它的作用是将两个 delimiter 之间的内容(document) 作为输入传递给 command
注意:
结尾的delimiter 一定要顶格写，前面不能有任何字符，后面也不能有任何字符，包括空格和 tab 缩进。
开始的delimiter前后的空格会被忽略掉。
/dev/null 文件
如果希望执行某个命令，但又不希望在屏幕上显示输出结果，那么可以将输出重定向到 /dev/null
/dev/null 是一个特殊的文件，写入到它的内容都会被丢弃；如果尝试从该文件读取内容，那么什么也读不到。但是 /dev/null 文件非常有用，将命令的输出重定向到它，会起到”禁止输出“的效果。如希望屏蔽 stdout 和 stderr，可以这样写：
$ command > /dev/null 2>&1
Shell 文件包含
Shell 也可以包含外部脚本，将外部脚本的内容合并到当前脚本。
Shell 中包含脚本可以使用：
. filename或source filename
两种方式的效果相同，简单起见，一般使用点号(.)，但是注意点号(.)和文件名中间有一空格。
被包含脚本不需要有执行权限
Shell的调试
Sh -nvx script.sh
其中-n值得是不运行shell脚本，只检查语法错误
-v值得是在执行脚本前，现将脚本的内容输出到屏幕上
-x值得是将使用到的script显示到屏幕上