shell 脚本入门--sed命令匹配

转载：
http://man.linuxde.net/sed

简介

sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。

sed 命令格式

[root@www ~]# sed [-nefr] [动作]
选项与参数：
-n ：使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到终端上。但如果加上 -n 参数后，则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。
-e ：直接在命令列模式上进行 sed 的动作编辑；
-f ：直接将 sed 的动作写在一个文件内， -f filename 则可以运行 filename 内的 sed 动作；
-r ：sed 的动作支持的是延伸型正规表示法的语法。(默认是基础正规表示法语法)
-i ：直接修改读取的文件内容，而不是输出到终端。
动作说明： [n1[,n2]]function

n1, n2 ：不见得会存在，一般代表『选择进行动作的行数』，举例来说，如果我的动作是需要在 10 到 20 行之间进行的，则『 10,20[动作行为] 』

function：
a ：新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)～
c ：取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行！
d ：删除，因为是删除啊，所以 d 后面通常不接任何咚咚；
i ：插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)；
p ：列印，亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行～
s ：取代，可以直接进行取代的工作哩！通常这个 s 的动作可以搭配正规表示法！例如 1,20s/old/new/g 就是啦！

补充：
a\ 在当前行下面插入文本。
i\ 在当前行上面插入文本。
c\ 把选定的行改为新的文本。
d 删除，删除选择的行。
D 删除模板块的第一行。
s 替换指定字符
h 拷贝模板块的内容到内存中的缓冲区。
H 追加模板块的内容到内存中的缓冲区。
g 获得内存缓冲区的内容，并替代当前模板块中的文本。
G 获得内存缓冲区的内容，并追加到当前模板块文本的后面。
l 列表不能打印字符的清单。
n 读取下一个输入行，用下一个命令处理新的行而不是用第一个命令。
N 追加下一个输入行到模板块后面并在二者间嵌入一个新行，改变当前行号码。
p 打印模板块的行。
P(大写) 打印模板块的第一行。
q 退出Sed。
b lable 分支到脚本中带有标记的地方，如果分支不存在则分支到脚本的末尾。
r file 从file中读行。
t label if分支，从最后一行开始，条件一旦满足或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾。
T label 错误分支，从最后一行开始，一旦发生错误或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾。
w file 写并追加模板块到file末尾。
W file 写并追加模板块的第一行到file末尾。
! 表示后面的命令对所有没有被选定的行发生作用。
= 打印当前行号码。

相关元字符集
^ 匹配行开始，如：/^sed/匹配所有以sed开头的行。
匹配行结束，如：/sed /匹配所有以sed结尾的行。
* 匹配0个或多个字符，如：/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。
[] 匹配一个指定范围内的字符，如/[ss]ed/匹配sed和Sed。
\ (..\) 匹配子串，保存匹配的字符，如s/(love)able/\1rs，loveable被替换成lovers。
\< 匹配单词的开始，如:/\ 匹配单词的结束，如/love>/匹配包含以love结尾的单词的行。
x{m,} 重复字符x，至少m次，如：/0{5,}/匹配至少有5个0的行。
x{m,n} 重复字符x，至少m次，不多于n次，如：/0{5,10}/匹配5~10个0的行。

相关用例

1. s 替换命令（原文件不会修改，sed 执行命令后，打印屏幕内容为 this is a books,但实际内容为 this is a test,加入-i ，会直接修改文件内容)

guosheng@guosheng:~/code/practice/bash_practice$ vi test1.sh 
guosheng@guosheng:~/code/practice/bash_practice$ sed 's/test/books/' test1.sh 
#!/bin/sh
# This is a books
guosheng@guosheng:~/code/practice/bash_practice$ cat test1.sh 
#!/bin/sh
# This is a test
guosheng@guosheng:~/code/practice/bash_practice$ 
guosheng@guosheng:~/code/practice/bash_practice$ sed -i '$a /test/books/' test1.sh 
guosheng@guosheng:~/code/practice/bash_practice$ cat test1.sh 
#!/bin/sh
# This is a test
/test/books/
guosheng@guosheng:~/code/practice/bash_practice$ sed -i 's/test/books/' test1.sh 
guosheng@guosheng:~/code/practice/bash_practice$ cat test1.sh 
#!/bin/sh
# This is a books
/books/books/

2.全面替换g

sed 's/book/books/g' file
echo sksksksksksk | sed 's/sk/SK/2g' 
skSKSKSKSKSK 
echo sksksksksksk | sed 's/sk/SK/3g' 
skskSKSKSKSK 
echo sksksksksksk | sed 's/sk/SK/4g' 
skskskSKSKSK

3./ 作为定界符号

4.d 删除命令

删除空白行： sed '/^$/d' file 
删除文件的第2行： sed '2d' file
删除文件的第2行到末尾所有行：sed '2,$d' file
删除文件最后一行：sed '$d' file
删除文件中所有开头是test的行： sed '/^test/'d file

5.已匹配字符串标记&

正则表达式 \w\+ 匹配每一个单词，使用 [&] 替换它，& 对应于之前所匹配到的单词：
echo this is a test line | sed 's/\w\+/[&]/g'
 [this] [is] [a] [test] [line] 
 所有以192.168.0.1开头的行都会被替换成它自已加localhost：
 sed 's/^192.168.0.1/&localhost/'
 file 192.168.0.1localhost

6.子串匹配标记\1

 echo this is digit 7 in a number | sed 's/digit \([0-9]\)/\1/'
 this is 7 in a number
命令中 digit 7，被替换成了 7。样式匹配到的子串是 7，\(..\) 用于匹配子串，对于匹配到的第一个子串就标记为 \1，依此类推匹配到的第二个结果就是 \2，
例如： echo aaa BBB | sed 's/\([a-z]\+\) \([A-Z]\+\)/\2 \1/' 
      BBB aaa 
love被标记为1，所有loveable会被替换成lovers，并打印出来： 
sed -n 's/\(love\)able/\1rs/p' file

7.选定行的范围 ,

所有在模板test和check所确定的范围内的行都被打印： sed -n '/test/,/check/p' file 
打印从第5行开始到第一个包含以test开始的行之间的所有行： sed -n '5,/^test/p' file 
对于模板test和west之间的行，每行的末尾用字符串aaa bbb替换： sed '/test/,/west/s/$/aaa bbb/' file