linux shell 基本知识

3.1     保留变量

BASH 中有一些保留变量，下面列出了一些：

$IFS　　这个变量中保存了用于分割输入参数的分割字符，默认识空格。
$HOME 　这个变量中存储了当前用户的根目录路径。
$PATH 　这个变量中存储了当前 Shell 的默认路径字符串。
$PS1　　表示第一个系统提示符。
$PS2　　表示的二个系统提示符。
$PWD　　表示当前工作路径。
$EDITOR 表示系统的默认编辑器名称。
$BASH 　表示当前 Shell 的路径字符串。
$0, $1, $2, ...
表示系统传给脚本程序或脚本程序传给函数的第0个、第一个、第二个等参数。
$#　　　表示脚本程序的命令参数个数或函数的参数个数。
$$　　　表示该脚本程序的进程号，常用于生成文件名唯一的临时文件。
$?　　　表示脚本程序或函数的返回状态值，正常为 0，否则为非零的错误号。
$*　　　表示所有的脚本参数或函数参数。
$@　　　和 $* 涵义相似，但是比 $* 更安全。
$!　　　表示最近一个在后台运行的进程的进程号。

3.2    随机数

a=$RANDOM
echo $a 

3.4     变量的特殊操作

BASH 中还有一些对变量的简洁、快速的操作，大家还记得 "${var}" 和 "$var" 同样是对变量的引用吧，对 ${var} 进行一些变化就可以产生一些新功能：
${var-default} 表示如果变量 $var 还没有设置，则保持 $var 没有设置的状态，并返回后面的默认值 default。
${var=default} 表示如果变量 $var 还没有设置，则取后面的默认值 default。
${var+otherwise} 表示如果变量 $var 已经设置，则返回 otherwise 的值，否则返回空( null )。
${var?err_msg} 表示如果变量 $var 已经设置，则返回该变量的值，否则将后面的 err_msg 输出到标准错误输出上。

请同学们自己尝试下面的例子：

#!/bin/bash

echo ${var?There is an error}

exit 0

还有下面一些用法，这些用法主要用于从文件路径字符串中提取有用信息：
${var#pattern}, ${var##pattern} 用于从变量 $var 中剥去最短（最长）的和 pattern 相匹配的最左侧的串。
${var%pattern}, ${var%%pattern} 用于从变量 $var 中剥去最短（最长）的和 pattern 相匹配的最右侧的串。

另外 BASH 2 中还加入下面一些操作：
${var:pos} 表示去掉变量 $var 中前 pos 个字符。
${var:pos:len} 表示变量 $var 中去掉前 pos 个字符后的剩余字符串的前 len 个字符。
${var/pattern/replacement} 表示将变量 $var 中第一个出现的 pattern 模式替换为 replacement 字符串。
${var//pattern/replacement} 表示将变量 $var 中出现的所有 pattern 模式全部都替换为 replacment 字符串。

4.2     用 BASH 设计简单用户界面

BASH 中提供了一个小的语句格式，可以让程序快速的设计出一个字符界面的用户交互选择的菜单，该功能就是由 select 语句来实现的，select 语句的语法为：

select var in

do
statments use $var
done

#!/bin/bash

OPTIONS="Hello Quit"
select opt in $OPTIONS; do
if [ "$opt" = "Quit" ]; then
echo done
exit
elif [ "$opt" = "Hello" ]; then
echo Hello World
else
clear
echo bad option
fi
done

exit 0

#!/bin/bash

passwd="aka@tsinghua"
ftp -n localhost <<FTPFTP
user anonymous $passwd
binary
bye
FTPFTP

另外一个非常有用的重定向操作符是 "-"，请看下面这个例子：

$ (cd /source/directory && tar cf - . ) | (cd /dest/directory && tar xvfp -)

该命令表示把 /source/directory 目录下的所有文件通过压缩和解压，快速的全部移动到 /dest/directory 目录下去，这个命令在 /source/directory 和 /dest/directory 不处在同一个文件系统下时将显示出特别的优势。

n<&- 表示将 n 号输入关闭
<&- 表示关闭标准输入（键盘）
n>&- 表示将 n 号输出关闭
>&- 表示将标准输出关闭

运算符	含义（ 满足下面要求时返回 TRUE ）
-e file	文件 file 已经存在
-f file	文件 file 是普通文件
-s file	文件 file 大小不为零
-d file	文件 file 是一个目录
-r file	文件 file 对当前用户可以读取
-w file	文件 file 对当前用户可以写入
-x file	文件 file 对当前用户可以执行
-g file	文件 file 的 GID 标志被设置
-u file	文件 file 的 UID 标志被设置
-O file	文件 file 是属于当前用户的
-G file	文件 file 的组 ID 和当前用户相同
file1 -nt file2	文件 file1 比 file2 更新
file1 -ot file2	文件 file1 比 file2 更老

[root@ganglia ~]# var="abc" ; echo ${#var}
3
[root@ganglia ~]# var="abdc" ; echo ${#var}
4
[root@ganglia ~]# var="中国人" ; echo ${#var}

10,调式脚本bash -x script.sh
11,
（1）不使用回车键来读取n个字符，read -n 2 var
（2）用无回显的方式读取密码： read -s var
（3）显示提示信息： read -p "请输入: " var
（4）在特定时间内读取输入: read -t time var
（5）用特定的定界符作为输入行的结束： read -d ":" var ,当用户在控制台输入冒号时这个输入就代表结束了

find ! -name "*.txt" -print 排除用法
find . -maxdepth 1 -name "f*" -print 基于深度的查询
find . -mindepth 1 -name "f*" -print 基于深度的查询
find . -type d -print 按文件类型过滤

f 普通文件
l 符号链接
d 目录
c 字符设备
b 块设备
s 套接字
p fifo

按时间搜索
-atime 用户最近一次的访问时间
-mtime 文件内容最后一次被修改的时间
-ctime 文件元数据最后一次变化的时间

find . -type f -atime -7 -print 最近7天，访问过的文件
find . -type f -atime 7 -print 恰好7天访问的文件
find . -type f -atime +7  -print  超过7天 访问过的文件

find . -type f -size +2k 查找大于2kb的文件
find . -type f -size -2k 查找小于2kb的文件
find . -type f -size 2k  查找等于2kb的文件

[root@ganglia 912]# cat aa.txt
1 2 3 4 5 6
7 8 9 10
11 12
[root@ganglia 912]# cat aa.txt | xargs
1 2 3 4 5 6 7 8 9 10 11 12
[root@ganglia 912]# cat aa.txt | xargs  -n 3
1 2 3
4 5 6
7 8 9
10 11 12
[root@ganglia 912]#

[root@ganglia 912]# echo "anbnc" | xargs -d n
a b c

[root@ganglia 912]# echo "i am CAT" | tr 'A-Z' 'a-z'
i am cat

echo "12354" | tr '0-9' '987456213'
解密
echo "12354" | tr '987456213' '0-9‘

[root@ganglia 912]# echo "cat 12 adf  3 " | tr -d '0-9'
cat  adf

7，统计文件行数，单词数，字节数
wc -l file统计行数
wc -w file统计单词数
wc -c file 统计字节数

sed '2,5d' datafile
#删除第二到第五行
sed '/My/,/You/d' datafile
#删除包含"My"的行到包含"You"的行之间的行
sed '/My/,10d' datafile
#删除包含"My"的行到第十行的内容

3.1 sed命令

命令	功能
a\	在当前行后添加一行或多行。多行时除最后一行外，每行末尾需用“\”续行
c\	用此符号后的新文本替换当前行中的文本。多行时除最后一行外，每行末尾需用"\"续行
i\	在当前行之前插入文本。多行时除最后一行外，每行末尾需用"\"续行
d	删除行
h	把模式空间里的内容复制到暂存缓冲区
H	把模式空间里的内容追加到暂存缓冲区
g	把暂存缓冲区里的内容复制到模式空间，覆盖原有的内容
G	把暂存缓冲区的内容追加到模式空间里，追加在原有内容的后面
l	列出非打印字符
p	打印行
n	读入下一输入行，并从下一条命令而不是第一条命令开始对其的处理
q	结束或退出sed
r	从文件中读取输入行
!	对所选行以外的所有行应用命令
s	用一个字符串替换另一个
g	在行内进行全局替换
w	将所选的行写入文件
x	交换暂存缓冲区与模式空间的内容
y	将字符替换为另一字符（不能对正则表达式使用y命令）

 

3.2 sed选项

选项	功能
-e	进行多项编辑，即对输入行应用多条sed命令时使用
-n	取消默认的输出
-f	指定sed脚本的文件名

 

5.正则表达式元字符

 与grep一样，sed也支持特殊元字符，来进行模式查找、替换。不同的是，sed使用的正则表达式是括在斜杠线"/"之间的模式。

如果要把正则表达式分隔符"/"改为另一个字符，比如o，只要在这个字符前加一个反斜线，在字符后跟上正则表达式，再跟上这个字符即可。例如：sed -n '\o^Myop' datafile

 

元字符	功能	示例
^	行首定位符	/^my/  匹配所有以my开头的行
$	行尾定位符	/my$/  匹配所有以my结尾的行
.	匹配除换行符以外的单个字符	/m..y/  匹配包含字母m，后跟两个任意字符，再跟字母y的行
*	匹配零个或多个前导字符	/my*/  匹配包含字母m,后跟零个或多个y字母的行
[]	匹配指定字符组内的任一字符	/[Mm]y/  匹配包含My或my的行
[^]	匹配不在指定字符组内的任一字符	/[^Mm]y/  匹配包含y，但y之前的那个字符不是M或m的行
..	保存已匹配的字符	1,20s/youself/\1r/  标记元字符之间的模式，并将其保存为标签1，之后可以使用\1来引用它。最多可以定义9个标签，从左边开始编号，最左边的是第一个。此例中，对第1到第20行进行处理，you被保存为标签1，如果发现youself，则替换为your。
&	保存查找串以便在替换串中引用	s/my/**&**/  符号&代表查找串。my将被替换为**my**
\<	词首定位符	/\<my/  匹配包含以my开头的单词的行
\>	词尾定位符	/my\>/  匹配包含以my结尾的单词的行
x\{m\}	连续m个x	/9\{5\}/ 匹配包含连续5个9的行
x\{m,\}	至少m个x	/9\{5,\}/  匹配包含至少连续5个9的行
x\{m,n\}	至少m个，但不超过n个x	/9\{5,7\}/  匹配包含连续5到7个9的行

sed '/my/p' datafile
#默认情况下，sed把所有输入行都打印在标准输出上。如果某行匹配模式my，p命令将把该行另外打印一遍。


sed -n '/my/p' datafile
#选项-n取消sed默认的打印，p命令把匹配模式my的行打印一遍。

sed '$d' datafile
#删除最后一行，其余的都被显示

sed '/my/d' datafile
#删除包含my的行，其余的都被显示

sed 's/^My/You/g' datafile
#命令末端的g表示在行内进行全局替换，也就是说如果某行出现多个My，所有的My都被替换为You。

sed -n '1,20s/My$/You/gp' datafile
#取消默认输出，处理1到20行里匹配以My结尾的行，把行内所有的My替换为You，并打印到屏幕上。

sed 's/^My/You/g' datafile
#命令末端的g表示在行内进行全局替换，也就是说如果某行出现多个My，所有的My都被替换为You。

sed -n '1,20s/My$/You/gp' datafile
#取消默认输出，处理1到20行里匹配以My结尾的行，把行内所有的My替换为You，并打印到屏幕上。

sed -e '1,10d' -e 's/My/Your/g' datafile

#选项-e用于进行多重编辑。第一重编辑删除第1-3行。第二重编辑将出现的所有My替换为Your。因为是逐行进行这两项编辑（

sed '/My/r introduce.txt' datafile
#如果在文件datafile的某一行匹配到模式My，就在该行后读入文件introduce.txt的内容。如果出现My的行不止一行，则在出现My

sed '/^hrwang/a\
>hrwang and mjfan are husband\
>and wife' datafile
#如果在datafile文件中发现匹配以hrwang开头的行，则在该行下面追加hrwang and mjfan are husband and wif

sed '1,20y/hrwang12/HRWANG^$/' datafile
#将1到20行内，所有的小写hrwang转换成大写，将1转换成^,将2转换成$。
#正则表达式元字符对y命令不起作用。与s命令的分隔符一样，斜线可以被替换成其它的字符。