Linux Shell编程及自动化运维实现 第5章 三剑客 sed(三剑客第二剑)

目录

 

sed(三剑客第二剑)

汇总示例

暂存空间  hHGgx

实战案例

---

sed(三剑客第二剑)

前言

Stream EDitor：流编辑

 sed 是一种在线的、非交互式的编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。

接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；

格式

1 sed   选项  命令 文件       sed [options] 'command' file(s)

2 sed     选项 –f 脚本 文件           sed [options] -f scriptfile file(s) 

返回值

都是0，对错不管。

只有当命令存在语法错误时，sed的退出状态才是非0

sed和正则表达式

与grep一样，sed在文件中查找模式时也可以使用正则表达式(RE)和各种元字符。正则表达式是括在斜杠间的模式，用于查找和替换，以下是sed支持的元字符。

使用基本元字符集    ^, $, ., *, [], [^], \< \>,\(\),\{\}
使用扩展元字符集    ?, +, |, ( )

使用扩展元字符的方式： \+           转义         sed -r      加-r

汇总示例

删除命令：   d

# sed -r '/root/d' passwd 

# sed -r '3d' passwd

# sed -r '$d' passwd                 //删除最后一行

替换命令：   s

# sed -r 's/root/666/' passwd

# sed -r 's/root/666/g' passwd

# sed -r 's/[0-9][0-9]$/&.5/' passwd      //查找双数  结尾的词组   &：替换成    双数.5     &有查询结果的含义。

VI中也有类似功能。

:% s/.*/#&/g
&：查询结果的含义

:% s/\(.*\)/#\1/g
每一行
换成
#每一行

# sed -r 's/(mail)/E\1/g' passwd

（）括号组合字符，\1调用括号
[root@localhost ~]# sed -r 's/(mail)/E\1/g' passwd 
Email:x:8:12:Email:/var/spool/Email:/sbin/nologin9

sed -r 's#(mail)#E\1#g' passwd          //分隔符可以换成井号

读文件命令：r

先创建一个文件1.txt并写入以下内容

# sed -r '$r 1.txt' passwd

# sed -r '/root/r 1.txt' passwd

写文件命令：w(另存为)

# sed -r 'w 111.txt' 1.txt                   //把1.txt全部内容 写入111.txt

# sed -r '/root/w 123.txt' passwd               //把1.txt 写入111.txt

# sed -r '1,5w 123.txt' passwd                //把1,5行另存为123.txt

追加命令：   a（之后）

# sed -r 'a123' passwd          //每行后面，都加上123行

# sed -r '2a123' passwd       //2行后面，加上123行

sed -r '2a 1111\
> 3333333\                                                    //插入段落，请使用\转义掉回车，不要忘了分号结束
> 444444' passwd

插入命令：   i（之前）

# sed -r '2iaaaaaaaa' passwd     //在第二行插入新行aaaaaaaaaa

# sed -r '2ibbbbbbb\
> cccccccc\
> ddddddd' passwd      //插入多行

替换整行命令：   c

 sed -r '2caaaaaaaa' passwd

一行替换多行

# sed -r '2c3333\
> 44444' passwd

获取下一行命令：n

# sed -r '/root/{n;d}' passwd

n下一行的意思。
找root行，然后下一行，删除

[root@localhost ~]# sed -r '/root/{n;d}' passwd 
root:x:0:0:root:/root:/bin/bash1
daemon:x:2:2:daemon:/sbin:/sbin/nologin3
adm:x:3:4:adm:/var/adm:/sbin/nologin4
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin5
sync:x:5:0:sync:/sbin:/bin/sync6
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown7
halt:x:7:0:halt:/sbin:/sbin/halt8
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin9
operator:x:11:0:operator:/root:/sbin/nologin10
# sed -r '/root/{n;s/bin/ding/g}' passwd 

{命令组合}
找到root行，下一行查找替换

[root@localhost ~]# sed -r '/root/{n;s/bin/ding/g}' passwd 
root:x:0:0:root:/root:/bin/bash1
ding:x:1:1:ding:/ding:/sding/nologin2
daemon:x:2:2:daemon:/sbin:/sbin/nologin3
adm:x:3:4:adm:/var/adm:/sbin/nologin4
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin5
sync:x:5:0:sync:/sbin:/bin/sync6
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown7
halt:x:7:0:halt:/sbin:/sbin/halt8
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin9
operator:x:11:0:operator:/root:/sbin/nologin10

反向选择:      !

[root@localhost ~]# sed -r '2,$d' passwd         //删除第二行到最后一行的内容
root:x:0:0:root:/root:/bin/bash1

[root@localhost ~]# sed -r '2,$!d' passwd      //不删除第二行到最后一行的内容，也就是删除第一行

bin:x:1:1:bin:/bin:/sbin/nologin2
daemon:x:2:2:daemon:/sbin:/sbin/nologin3
adm:x:3:4:adm:/var/adm:/sbin/nologin4
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin5
sync:x:5:0:sync:/sbin:/bin/sync6
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown7
halt:x:7:0:halt:/sbin:/sbin/halt8
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin9
operator:x:11:0:operator:/root:/sbin/nologin10

多重编辑 ：   e  ；

# sed -r -e '1,3d' -e '4s/adm/admin/g' passwd     //删除第一到第三行，并把第四行的adm替换为adming全局替换

# sed -r  '1,3d;4s/adm/admin/g' passwd   //同上

# sed -r '2s/bin/ding/g;2s/nologin/bash/' passwd           //把第二行的bin替换为ding，并把第二行的nologin替换为bash

 # sed -r '2{s/bin/ding/g;s/nologin/bash/}' passwd          //同上

 

暂存空间  hHGgx

图示

暂存和取用命令：h覆盖暂存空间 H追加暂存空间 g覆盖行 G追加行

# sed -r 'g' passwd        //为什么是空白一片

# sed -r 'G' passwd   //G是从暂存空间，追加到模式空间。

# sed -r '1h;$G' passwd       //第一行覆盖到暂存空间;将暂存空间的内容追加到最后一行

# sed -r '1h;2G;3G;$G' passwd      //第一行覆盖到暂存空间，2后面多一行，3后面多一行，10后面多一行

  # sed -r '1{h;d};$G' passwd       //第一行进入暂存空间，第一行在模式空间中删除，将暂存空间最佳到最后一行。
就像移动。

# sed -r '1h;2,$g' passwd     //第一行进入暂存空间;将暂存空间覆盖在，2到最后一行，
# sed -r '1h;2,3H;$G' passwd    //第一行进入暂存空间；2,3行追加进攒存空间；将暂存的内容追加到最后一行
 

# sed -r '4h;5x;6G' passwd   //第四行进入暂存空间；将模式空间第五行和暂存空间互换，将暂存空间的内容追加到第六行。

实战案例

删除配置文件中#号注释行

# sed -r '/^#/d' /etc/samba/smb.conf                 //把#开头的行删除

进阶班

# sed -r '/^[ \t]*#/d' space.txt                      //删除：以0个和多个空，或者tab，以及#号开始的行

删除配置文件中//号注释行

  # sed -r '\Y^[ \t]*//Yd'  space.txt           //由于分隔符也是/，所以使用自定义分隔符\Y。

删除无内容空行

# sed -r '/^[ \t]*$/d' space.txt               //$即代表空行。

删除注释行及空行另类写法

# sed -ri '/^[ \t]*#/d; /^[ \t]*$/d' /etc/vsftpd/vsftpd.conf    //    都是删除#行和空行

# sed -ri '/^[ \t]*#|^[ \t]*$/d' /etc/vsftpd/vsftpd.conf   //    都是删除#行和空行，区别在于使用了     “A|B”     A或B

# sed -ri '/^[ \t]*($|#)/d' /etc/vsftpd/vsftpd.conf      //  第三行用括号和$|#进行双选。（）进行了组词

修改文件：

# sed -ri '$a\chroot_local_user=YES' /etc/vsftpd/vsftpd.conf    //在最后一行追加

# sed -ri '/^SELINUX=/cSELINUX=disabled' /etc/selinux/config   //换行c

给文件行添加注释：

# sed -r '2,6s/^/#/' a.txt     //找到2到6行，把开始换成#

# sed -r '2,6s/(.*)/#\1/' a.txt      //（）内容可以被\1引用

# sed -r '2,6s/.*/#&/' a.txt        //       &匹配前面查找的内容

多个#换成一个#

样本文件

###111
#222
####333
########4

示范

# sed -r 's/^#*/#/g'   文件名

#111
#222
#333
#4
#
sed中使用外部变量

准备工作

# var1=11111

追加变量

# sed -r  "1a$var1" /etc/hosts

第一行后追加变量$var1
[root@localhost ~]# sed -r  "1a$var1" /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
111111
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
注意调用变量时，使用单引号是错误的。