sed是一种流编辑器,它是文本处理中非常中的工具,能够完美的配合正则表达式使用,功能不同凡响。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有改变,除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转换程序等。

—sed的选项、命令、替换标记

命令格式

sed [options] 'command' file(s)
sed [options] -f scriptfile file(s)

选项

a\ 在当前行下面插入文本。
i\ 在当前行上面插入文本。
c\ 把选定的行改为新的文本。
d  删除,删除选择的行。
D  删除模板块的第一行。
s  替换指定字符
h  拷贝模板块的内容到内存中的缓冲区。
H  追加模板块的内容到内存中的缓冲区。
g  获得内存缓冲区的内容,并替代当前模板块中的文本。
G  获得内存缓冲区的内容,并追加到当前模板块文本的后面。
l  列表不能打印字符的清单。
n  读取下一个输入行,用下一个命令处理新的行而不是用第一个命令。
N  追加下一个输入行到模板块后面并在二者间嵌入一个新行,改变当前行号码。
p  打印模板块的行。P(大写) 打印模板块的第一行。
q  退出Sed。
b  lable 分支到脚本中带有标记的地方,如果分支不存在则分支到脚本的末尾。
r  file 从file中读行。
t  label if分支,从最后一行开始,条件一旦满足或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
T  label 错误分支,从最后一行开始,一旦发生错误或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
w  file 写并追加模板块到file末尾。  
W  file 写并追加模板块的第一行到file末尾。  
!  表示后面的命令对所有没有被选定的行发生作用。  
=  打印当前行号码。  
#  把注释扩展到下一个换行符以前。

sed元字符集

^ 匹配行开始,如:/^sed/匹配所有以sed开头的行。
$ 匹配行结束,如:/sed$/匹配所有以sed结尾的行。
. 匹配一个非换行符的任意字符,如:/s.d/匹配s后接一个任意字符,最后是d。
* 匹配0个或多个字符,如:/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。
[] 匹配一个指定范围内的字符,如/[ss]ed/匹配sed和Sed。  
[^] 匹配一个不在指定范围内的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头,紧跟ed的行。
\(..\) 匹配子串,保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers。
& 保存搜索字符用来替换其他字符,如s/love/**&**/,love这成**love**。
\< 匹配单词的开始,如:/\ 匹配单词的结束,如/love\>/匹配包含以love结尾的单词的行。
x\{m\} 重复字符x,m次,如:/0\{5\}/匹配包含5个0的行。
x\{m,\} 重复字符x,至少m次,如:/0\{5,\}/匹配至少有5个0的行。
x\{m,n\} 重复字符x,至少m次,不多于n次,如:/0\{5,10\}/匹配5~10个0的行。

—sed用法实例


替换操作:s命令

# 替换文本中的字符串
$ sed 's/book/books/' files
# -n选项和p命令一起使用表示只打印那些发生替换的行
$ sed -n 's/book/books/'p files
# 直接编辑文件选项-i,会匹配file文件中每一行的第一个book替换为books
$ sed -i 's/book/books/' files

全面替换标记g

# 使用后缀 /g 标记会替换每一行中的所有匹配
$ sed 's/book/books/g' files
# 当需要从每一行的第N处匹配开始替换时,可以使用 /Ng
$ sed -n 's/book/books/2g'p files

定界符

# 之前命令中字符 / 在sed中作为定界符使用,也可以使用任意的定界符
$ sed 's#book#books#' files 
$ sed 's|book|books|' files
$ sed 's:book:books:' files 
# 定界符出现在样式内部时,需要进行转义
$ sed 's/\/user\/bin/#user#bin/' files

删除操作:d命令

# 删除空白行:
$ sed '/^$/d' files
 
# 删除文件的第2行:
$ sed '2d' files
 
# 删除文件的第2行到末尾所有行:
$ sed '2,$d' files
 
# 删除文件最后一行:
$ sed '$d' files
 
# 删除文件中所有开头是test的行:
$ sed '/^test/'d files

已匹配字符串标记&

# 正则表达式 \w\+ 匹配每一个单词,使用 --&-- 替换它,& 对应于之前所匹配到的单词
# 分别运行看看效果有什么不一样
$ sed 's|AB|--&--|g' files
$ sed 's|\w|--&--|g' files
$ sed 's|\+|--&--|g' files
$ sed 's|\w\+|--&--|g' files
 
# 所有以book开头的行都会被替换成[自己+&符后面的字符串(包括空格)]
$ sed 's|^book|& Test|g' files

组合多个表达式

# 3条命令执行结果是对等的
$ sed 's/book/books/' files | sed 's/books/book/'
$ sed 's/book/books/' | sed 's/books/book/' files
$ sed 's/book/books/;s/books/book/' files

引用

# sed表达式可以使用单引号来引用,但是如果表达式内部包含变量字符串,就需要使用双引号
$ TEST="Teh is Test ." 
$ sed "s/Test/$TEST/" files

选定行的范围 ,(逗号)

# 所有在模板books和Test所确定的范围内的行都被打印
$ sed -n '/books/,/Test/p' files
 
# 打印从第3行开始到第一个包含以Test开始的行之间的所有行
$ sed -n '3,/^Test/p' files
 
# 对于模板books和Test之间的行,每行的末尾用字符串LOOK BOOKS替换
$ sed '/books/,/Test/s/$/ LOOK BOOKS/' files

多点编辑:e命令


# 多点编辑:删除1~2行,并替换Test字符串为check
$ sed -e '1,2d' -e 's/Test/check/' files

从文件读入:r命令

# file里的内容被读进来,显示在与Test匹配的行后面,如果匹配多行,则file的内容将显示在所有匹配行的下面
$ sed '/Test/r file' files

写入文件:w命令

# 在files中所有包含Test的行都被写入file里
$ sed -n '/Test/w file' files

追加(行下):a\命令

# 将 The is a Test line 追加到 以test 开头的行后面
$ sed '/^Test/a\The is a Test line' files
 
在files文件第4行之前插入The is a Test line
$ sed '4a\The is a Test line' files

下一个:n命令

# 如果book被匹配,则移动到匹配行的下一行,替换这一行的Test,变为TEST,并打印该行,然后继续
$ sed '/book/{ n; s/Test/TEST/g; }' files

变形:y命令

# 把1~3行内所有book转变为大写. 注意:正则表达式元字符不能使用这个命令
$ sed '1,3y/book/BOOK/' files

退出:q命令

# 打印完第10行后,退出sed
$ sed '4q' files