一、前言
(一)、sed 工作流程
sed 是一种在线的、非交互式的流编辑器,它一次处理一行内容。处理时,把当做前处理的行存储在临时缓存区中,成为“模式空间”(pattern space),接着用sed命令处理缓存区中的内容,处理完成后,把缓存区的内容送往屏幕。接着处理下一行,这样不断重新,直到文件末尾,文件内容并没有改变,除非你使用重定向存储输出。sed主要来自动编辑一个或多个文件,简化问文件的反复操作,编写转换程序等;
(二)、sed 名利格式
sed [options] 'command' file(s)
sed [options] -f scriptfile file(s)
注:
sed和grep不一样,不管是否找到指定的模式,它的退出状态都是0,只有当命令存在语法错误时,sed的退出状态才是非0
(三)、支持正则表达式
与grep一样,sed在文件中查找模式时也可以使用正则表达式(RE)和各种原字符,正则表达式是包括斜杠间的模式,用于查找和替换,以下是sed支持的元子浮。
使用基本元字符集 ^, $, ., *, [], [^], \< \>,\(\),\{\}
使用扩展元字符集 ?, +, { }, |, ( )
使用扩展元字符的方式:
\+
sed -r
二、示例
(一)、基本用法
# sed -r '' /etc/passwd
# sed -r 'p' /etc/passwd
# sed -r -n 'p' /etc/passwd
# sed -r -n '/root/p' /etc/passwd
# sed -r 's/root/alice/' /etc/passwd
# sed -r 's/root/alice/g' /etc/passwd
# sed -r 's/root/alice/gi' /etc/passwd
# sed -r '/root/d' /etc/passwd
# sed -r '\#root#d' /etc/passwd
==========================================
[root@liwei ~] vim a.txt
/etc/abc/456
etc
[root@liwei ~]# sed -r '//etc/abc/456/d' a.txt
sed:-e 表达式 #1,字符 0:no previous regular expression
[root@liwei ~]# sed -r '/\/etc\/abc\/456/d' a.txt
/etc/abc/456
[root@liwei ~]# sed -r '\#/etc/abc/456#d' a.txt
/etc/abc/456
[root@liwei ~]# sed -r 's#/etc/abc/456#/dev/sda1#'
==========================================
(二)、sed扩展
①地址(定址)
地址用于决定对哪些行进行编辑,地址形式可以是数字、正则表达式或二者的结合,如果没有指定地址,sed将处理输入文件中的所有行。
# sed -r 'd' /etc/passwd
# sed -r '3d' /etc/passwd
# sed -r '1,3d' /etc/passwd
# sed -r '/root/d' /etc/passwd
# sed -r '/root/,5d' /etc/passwd
# sed -r 's/root/alice/g' /etc/passwd
# sed -r '/^adm/,20d' /etc/passwd //删除到第20行
# sed -r '/^adm/,+20d' /etc/passwd //再删除20行
# sed -r '2,5d' /etc/passwd
# sed -r '/root/d' /etc/passwd
# sed -r '/root/!d' /etc/passwd
# sed -r '1~2d' /etc/passwd //删除所有奇数行 odd-numbered
# sed -r '0~2d' /etc/passwd //删除所有偶数行 even-numbered
②sed命令
sed 命令告诉sed对指定行进行任何操作,包括打印、删除、修改等;
命令 功能
a //在当前行后添加一行或多行
c //用新文本修改(替换)当前行中的文本
d //删除行
i //在当前行之前插入文本
l //列出非打印字符
p //打印行
n //读入下一出入行,并从下一行命令而不是第一条命名开始对其的处理
! //对所选行以外的所有行应用命名
s //用一个字符串替换另一个,(替换标志)
g //全局(结合命令s)
i //忽略大小写(结合命令s)
r //从文件中读
w //将行写入文件
y //将字符装换为另一字符(不支持正则表达式)
h //把模式空间里的内容复制到暂存缓存冲(覆盖)
H //把模式空间里的内容追加到暂存缓冲区
g //取出暂存缓冲区的内容,将其复制到模式空间,覆盖该处原有内容
G //取出暂存缓冲区的内容,将其复制到模式空间,追加在原有内容
x //交换暂存缓冲区与模式空间的内容
③选项
选项 功能
-e //允许多项编辑
-f //指定sed脚本文件名
-n //取消默认的输出
-i //inplace,就地编辑
-r //支持扩展元字符
三、实操示例
(一)、打印命令:p
# sed -r '/north/p' datafile
# sed -r -n '/north/p' datafile
(二)、删除命令:d
# sed -r '3d' datafile
# sed -r '3{d;}' datafile
# sed -r '3{d}' datafile
# sed -r '3,$d' datafile
# sed -r '$d' datafile
# sed -r '/north/d' datafile
# sed -r '/sout/d' datafile
(三)、替换命令:s
# sed -r 's/west/north/g' datafile
# sed -r 's/^west/north/' datafile
# sed -r 's/[0-9][0-9]$/&.5/' datafile //&代表在查找串中匹配到的内容
# sed -r 's/Hemenway/Jones/g' datafile
# sed -r 's/(Mar)got/\1ianne/g' datafile
# sed -r 's#3#88#g' datafile
(四)、读文件命令:r
# sed -r '/Suan/r /etc/newfile' datafile
# sed -r '2r /etc/hosts' a.txt
# sed -r '/2/r /etc/hosts' a.txt
(五)、写文件命令:w
# sed -r '/north/w newfile' datafile
# sed -r '3,$w /new1.txt' datafile
(六)、追加命令:a
# sed -r '2a\1111111111111' /etc/hosts
# sed -r '2a\1111111111111\
> 222222222222\
> 333333333333' /etc/hosts
(七)、插入命令:i
# sed -r '2i\1111111111111' /etc/hosts
# sed -r '2i111111111\
> 2222222222\
> 3333333333' /etc/hosts
(八)、修改命令:c
# sed -r '2c\1111111111111' /etc/hosts
# sed -r '2c\111111111111\
> 22222222222\
> 33333333333' /etc/hosts
(九)、获取下一行命令:n
# sed -r '/eastern/{ n; d }' datafile
# sed -r '/eastern/{ n; s/AM/Archile/ }' datafile
(十)、暂存和取用命令:h H g G
# sed -r '1h;$G' /etc/hosts
# sed -r '1{h;d};$G' /etc/hosts
# sed -r '1h; 2,$g' /etc/hosts
# sed -r '1h; 2,3H; $G' /etc/hosts
(十一)、暂存空间和模式空间互换命令:x
# sed -r '4h; 5x; 6G' /etc/hosts
(十二)、反向选择:!
# sed -r '3d' /etc/hosts
# sed -r '3!d' /etc/hosts
(十三)、多重编辑选项:-e
# sed -r -e '1,3d' -e 's/Hemenway/Jones/' datafile
# sed -r '1,3d; s/Hemenway/Jones/' datafile
# sed -r '2s/WE/1000phone/g; 2s/Gray/YYY/g' datafile
# sed -r '2{s/WE/1000phone/g; s/Gray/YYY/g}' datafile
四、sed常见操作
//删除配置文件中#号注释行
sed -ri '/^#/d' file.conf
sed -ri '/^[ \t]*#/d' file.conf
//删除配置文件中//号注释行
sed -ri '\Y^[ \t]*//Yd' file.conf
//删除无内容空行
sed -ri '/^[ \t]*$/d' file.conf
//删除注释行及空行:
# sed -ri '/^[ \t]*#/d; /^[ \t]*$/d' /etc/vsftpd/vsftpd.conf
# sed -ri '/^[ \t]*#|^[ \t]*$/d' /etc/vsftpd/vsftpd.conf
# sed -ri '/^[ \t]*($|#)/d' /etc/vsftpd/vsftpd.conf
//修改文件:
# sed -ri '$a\chroot_local_user=YES' /etc/vsftpd/vsftpd.conf
# sed -ri '/^SELINUX=/cSELINUX=disabled' /etc/selinux/config
# sed -ri '/UseDNS/cUseDNS no' /etc/ssh/sshd_config
# sed -ri '/GSSAPIAuthentication/cGSSAPIAuthentication no' /etc/ssh/sshd_config
//给文件行添加注释:
# sed -r '2,6s/^/#/' a.txt
# sed -r '2,6s/(.*)/#\1/' a.txt
# sed -r '2,6s/.*/#&/' a.txt
//&匹配前面查找的内容
# sed -r '3,$ s/^#*/#/' a.txt //将行首零个或多个#换成一个#
# sed -r '30,50s/^[ \t]*#*/#/' /etc/nginx.conf
# sed -r '2,8s/^[ \t#]*/#/' /etc/nginx.conf
sed中使用外部变量
# var1=11111
# sed -ri '3a$var1' /etc/hosts
# sed -ri "3a$var1" /etc/hosts
# sed -ri 3a$var1 /etc/hosts
# sed -ri "$a$var1" /etc/hosts
# sed -ri '$a'"$var1" /etc/hosts
# sed -ri "\$a$var1" /etc/hosts