note_11.4_sed命令

文本处理三剑客：

• grep, egrep, fgrep：文本过滤器
• sed：Stream EDitor，流编辑器，行
• awk：文本格式化工具，报告生成器

---

sed命令：

sed [OPTION]... 'script' [input-file] ...

• script：
  地址定界编辑命令

• 常用选项：
  -n：阻止自动打印模式空间内容
-e script, --expression=script：多点编辑
-f /PATH/TO/SED_SCRIPT_FILE
    每行一个编辑命令；
  -r, --regexp-extended：支持使用扩展正则表达式
-i[SUFFIX], --in-place[=SUFFIX]：直接编辑原文件

  e.g. ~]# sed -e 's@^#[[:space:]]*@@' -e '/^UUID/d' /etc/fstab

• 地址定界：
  (1) 空地址：对全文进行处理；
  (2) 单地址：
    #：指定行；
    /pattern/：被此模式所匹配到的每一行；
  (3) 地址范围
    #,#：
    #,+#：
    #，/pat1/
    /pat1/,/pat2/
    $：最后一行；
  (4) 步进：~
    1~2：所有奇数行
    2~2：所有偶数行

• 编辑命令：
  d：删除
p：显示模式空间中的内容
a \text：在行后面追加文本“text”，支持使用\n实现多行追加
i \text：在行前面插入文本“text”，支持使用\n实现多行插入
c \text：把匹配到的行替换为此处指定的文本“text”
w /PATH/TO/SOMEFILE：保存模式空间匹配到的行至指定的文件中
r /PATH/FROM/SOMEFILE：读取指定文件的内容至当前文件被模式匹配到的行后面；文件合并
=：为模式匹配到的行打印行号
!：条件取反 ;(地址定界!编辑命令)

  s///：查找替换，其分隔符可自行指定，常用的有s@@@, s###等
   替换标记：
     g：全局替换；
   w /PATH/TO/SOMEFILE：将替换成功的结果保存至指定文件中；
   p：显示替换成功的行；

---

练习

1、删除/boot/grub/grub2.cfg文件中所有以空白字符开头的行的行首的所有空白字符；
[root@localhost ~]# sed 's/^[[:space:]]*//g' /boot/grub2/grub.cfg
2、删除/etc/fstab文件中所有以#开头的行的行首的#号及#后面的所有空白字符；
[root@localhost ~]# sed '/^#/s@[#[:space:]]@@g' /etc/fstab
3、输出一个绝对路径给sed命令，取出其目录，其行为类似于dirname；
[root@localhost ~]# echo '/var/log/messages/' | sed 's/[^/]\+\/\?$//'

---

高级编辑命令：

h：把模式空间中的内容覆盖至保持空间中
H：把模式空间中的内容追加至保持空间中
g：把保持空间中的内容覆盖至模式空间中
G：把保持空间中的内容追加至模式空间中
x：把模式空间中的内容与保持空间中的内容互换
n：覆盖读取匹配到的行的下一行至模式空间中
N：追加读取匹配到的行的下一行至模式空间中
d：删除模式空间中的行
D：删除多行模式空间中的所有行

示例：

sed  -n  'n;p'  FILE：显示偶数行；
sed  '1!G;h;$!d'  FILE：逆序显示文件的内容；
sed  ’$!d'  FILE：取出最后一行；
sed  '$!N;$!D' FILE：取出文件后两行；
sed '/^$/d;G' FILE：删除原有的所有空白行，而后为所有的非空白行后添加一个空白行；
sed  'n;d'  FILE：显示奇数行；
sed 'G' FILE：在原有的每行后方添加一个空白行；

sed -r ':1;N;s/^(\S+)((\n.*)*)\n\1$/\1\2/M;$!b1'去除重复行

[root@localhost ~]# sed -r ':1;N;s/^(\S+)((\n.*)*)\n\1$/\1\2/M;$!b1' test
1
231
31
321
aaa
sss
ddd
aaaa
aa
[root@localhost ~]# cat test
1
1
231
31
321
aaa
sss
ddd
aaa
aaaa
aa