Shell文本三剑客之Sed

目录

一、Sed编辑器

1.1Sed概述

1.2Sed工作流程

1.3Sed基本用法

1.4Sed常用选项

1.5sed命令的常用操作

二、Sed命令使用

2.1打印内容

2.2删除内容

2.3插入内容

2.4取反 

2.5搜索替代 

2.6分组调用

---

一、Sed编辑器

1.1Sed概述

• sed编辑器时一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。

• sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要存储在一个命令文本文件中。

1.2Sed工作流程

sed 的工作流程主要包括读取、执行和显示三个过程： 读取:sed 从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的缓冲区中（又称模式空间，pattern space）。 执行：默认情况下，所有的sed 命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed 命令 将会在所有的行上依次执行。 显示font>：发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。

PS：默认情况下所有的sed命令都是在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。 

1.3Sed基本用法

sed -e '操作' 文件1 文件2
 
sed -n -e '操作' 文件1 文件2 
 
sed -f 脚本文件 文件1 文件2 
 
sed -i -e '操作' 文件1 文件2

1.4Sed常用选项

-e 或 - -expression=∶ 多点编辑

-f 或- -file=∶表示用指定的脚本文件来处理输入的文本文件。

-h 或- -help∶显示帮助。

-n∶ 不输出模式空间内容到屏幕，即不自动打印，加p，又恢复自动打印

-i∶ 备份文件文件并原处编辑

-r：使用扩展正则表达式

1.5sed命令的常用操作

s∶替换，替换指定字符。

d∶删除，删除选定的行。

a∶ 增加，在当前行下面增加一行指定内容。

i∶ 插入，在选定行上面插入一行指定内容。

c∶ 替换，将选定行替换为指定内容。

Y∶ 字符转换，转换前后的字符长度必须相同。

p∶ 打印，如果同时指定行，表示打印指定行;如果不指定行，则表示打印所有内容; 如果有非打印字符，则以 AscII码输出。其通常与_n"选项一起使用。

=∶打印行号。

l（小写L）∶打印数据流中的文本和不可打印的ASCII字符（比如结束符s、制表符\t）

二、Sed命令使用

2.1打印内容

示例1：打印全部内容

sed ‘ ’交互模式输入一行，自动打印一行相同的

sed -n ‘ ’ 交互模式输入一行，关闭自动打印

sed -n ‘ p’加上p又恢复自动打印

[root@localhost ~]# sed ''
11
11
22
22
33
33
44
44
^C
[root@localhost ~]# sed -n ''
11
22
33
^C
[root@localhost ~]# sed -n ' p'
11
11
22
22
33
33

示例2：查看文件，打印全部内容

#法一：
[root@localhost opt]#sed ' ' /etc/fstab 
 
#
# /etc/fstab
# Created by anaconda on Sat Sep  4 02:48:23 2021
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
/dev/mapper/centos-root /                       xfs     defaults        0 0
UUID=183ca7c7-1989-4f43-9e81-d2676192f5a4 /boot                   xfs     defaults        0 0
/dev/mapper/centos-home /home                   xfs     defaults        0 0
/dev/mapper/centos-swap swap                    swap    defaults        0 0
/dev/sdb1 /mnt xfs defaults 0 0
 
#法二
[root@localhost opt]#sed -n ' p' /etc/fstab 
 
#
# /etc/fstab
# Created by anaconda on Sat Sep  4 02:48:23 2021
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
/dev/mapper/centos-root /                       xfs     defaults        0 0
UUID=183ca7c7-1989-4f43-9e81-d2676192f5a4 /boot                   xfs     defaults        0 0
/dev/mapper/centos-home /home                   xfs     defaults        0 0
/dev/mapper/centos-swap swap                    swap    defaults        0 0
/dev/sdb1 /mnt xfs defaults 0 0 

示例3：打印指定行内容

##例如：打印第四行内容
[root@localhost opt]# sed -n '4p' /etc/fstab 
# Created by anaconda on Thu Jul 21 01:10:26 2022
[root@localhost opt]# ifconfig ens33|sed -n '2p'
        inet 192.168.130.10  netmask 255.255.255.0  broadcast 192.168.130.255

示例4：根据地址，打印指定多行内容

#打印2-4行
[root@localhost opt]# ifconfig ens33|sed -n '2,4p'
        inet 192.168.130.10  netmask 255.255.255.0  broadcast 192.168.130.255
        inet6 fe80::2c66:ff7b:74c1:74d1  prefixlen 64  scopeid 0x20
        ether 00:0c:29:40:6d:34  txqueuelen 1000  (Ethernet)
 
#打印2行加4行，就是打印第二行到第6行
[root@localhost opt]# cat -n /etc/passwd|sed -n '2,+4p'
     2    bin:x:1:1:bin:/bin:/sbin/nologin
     3    daemon:x:2:2:daemon:/sbin:/sbin/nologin
     4    adm:x:3:4:adm:/var/adm:/sbin/nologin
     5    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
     6    sync:x:5:0:sync:/sbin:/bin/sync

 示例5：打印多行后退出

[root@localhost opt]# sed '3q' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

示例6：打印最后一行，使用通配符$

[root@localhost opt]# sed -n '$p' /etc/passwd
lili:x:1002:1002::/home/lili:/bin/bash

示例7：支持正则表达式

#查找基本格式：
sed -n '//,//p' 文件名
第一个//表示开头位置，第二个//表示结尾位置 

[root@localhost opt]# sed -n '/^r/,/^f/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
colord:x:997:994:User for colord:/var/lib/colord:/sbin/nologin
saslauth:x:996:76:Saslauthd user:/run/saslauthd:/sbin/nologin
setroubleshoot:x:995:993::/var/lib/setroubleshoot:/sbin/nologin
rtkit:x:172:172:RealtimeKit:/proc:/sbin/nologin
pulse:x:171:171:PulseAudio System Daemon:/var/run/pulse:/sbin/nologin
qemu:x:107:107:qemu user:/:/sbin/nologin
ntp:x:38:38::/etc/ntp:/sbin/nologin
radvd:x:75:75:radvd user:/:/sbin/nologin
chrony:x:994:990::/var/lib/chrony:/sbin/nologin
tss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/sbin/nologin
usbmuxd:x:113:113:usbmuxd user:/:/sbin/nologin
geoclue:x:993:988:User for geoclue:/var/lib/geoclue:/sbin/nologin
sssd:x:992:987:User for sssd:/:/sbin/nologin
gdm:x:42:42::/var/lib/gdm:/sbin/nologin
rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
gnome-initial-setup:x:991:986::/run/gnome-initial-setup/:/sbin/nologin
avahi:x:70:70:Avahi mDNS/DNS-SD Stack:/var/run/avahi-daemon:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
tcpdump:x:72:72::/:/sbin/nologin
xiin:x:1000:1000:xiin:/home/xiin:/bin/bash
zhangsan:x:1001:1001::/home/zhangsan:/bin/bash
lili:x:1002:1002::/home/lili:/bin/bash

 示例8：过滤关键字

[root@localhost opt]# sed -n '/root/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost opt]# grep 'root' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

 示例9：‘#，/关键字/p’ 从第#行开始匹配

[root@localhost opt]# sed -n '2,/root/p' /etc/passwd
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin

 示例10：‘/关键字/，#’ 找到第#个关键字为止

[root@localhost opt]# sed -n '/root/,3p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin

示例11： 打印文本的奇数和偶数行。

[root@localhost opt]# seq 10|sed -n '1~2p'
1
3
5
7
9
[root@localhost opt]# seq 10|sed -n '2~2p'
2
4
6
8
10
[root@localhost opt]# seq 10|sed  '1~2d'
2
4
6
8
10
[root@localhost opt]# seq 10|sed  '2~2d'
1
3
5
7
9

2.2删除内容

示例1：删除指定行

#删除指定行并不是真正删除，只是将删除了的结果显示出来，并不是真正删除了

[root@localhost opt]# cat seq.txt 
1
2
3
4
5
6
7
8
9
10
[root@localhost opt]# cat seq.txt |sed '3d'
1
2
4
5
6
7
8
9
10
[root@localhost opt]# cat seq.txt 
1
2
3
4
5
6
7
8
9
10

 

示例2：删除指定的多行

示例3： 删除文本中的空行

示例4： 删除以指定字符结尾的行及取反。

示例5：先备份内容再删除

2.3插入内容

示例1：在指定行后插入

示例2：插入空行，修改文件的换行，要多加一个\

 示例3：替换

2.4取反 

2.5搜索替代 

格式：格式：sed 行范围 s/旧字符串/新字符串/替换标记

替换标记：

• 数字：表明新字符串将替换第几处匹配的地方

• g ： 表明新字符串将会替换所有匹配的地方

• p ： 打印与替换命令匹配的行，与 -n 一起使用

• w 文件 ：将替换的结果写到文件中

示例1：修改selinux开机不自启配置文件

sed -i 's/SELINUX=enabled/SELINUX=disabled/' /etc/selinux/config  

示例2：修改多行，使用r 以及-e

sed -ri -e 's/SELINUX=disabled/SELINUX=enabled/' /etc/selinux/config  -e 's/SELINUXTYPE=targeted/SELINUXTYPE=111/' /etc/selinux/config  

示例3：修改全局，后面加g

sed -i 's/root/admin/g' passwd  

2.6分组调用

示例1：

第一组

[root@localhost opt]# echo 11aaxx|sed -r 's/(11)(aa)(xx)/\1/'
11

第二组
[root@localhost opt]# echo 11aaxx|sed -r 's/(11)(aa)(xx)/\2/'
aa

所有组
[root@localhost opt]# echo 11aaxx|sed -r 's/(11)(aa)(xx)/\1\2\3/'
11aaxx

示例2：提取IP地址

ifconfig ens33 |sed -rn '2s/.*(inet) ([0-9.]+)  (netmask) ([0-9.]+)  (broadcast) ([0-9.]+).*/\2/p'
192.168.130.10

示例3：@和/效果一样

echo /etc/sysconfig/network-scripts/ifcfg-ens33 |sed -nr 's@^(.*)/([^/]+)@\2@p'