2019-07-24

day19

课程介绍

1.系统正则符号
2.sed命令详解

知识回顾

1. 通配符号 * {}
   通配符号主要用于匹配文件名称
2. 正则符号
   正则符号主要用于匹配文件内容
   基础正则: ^ . * .* [] [^] \ 9个
   扩展正则: + | {n,m} {,m} {n,} {n} () ?

   取出IP地址:
   第一个里程: 有什么命令可以显示IP地址
   ip a s eth0  = ip address show eth0 
   ifconfig eth0
   第二个里程: 筛选出指定行
     ip a s eth0|grep "eth0$"
    \inet 10.0.0.200/24 brd 10.0.0.255 scope global noprefixroute eth0
   第三个里程: 取出IP地址 
    ip a s eth0 | grep  "eth0$"|egrep "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"
   ip a s eth0 | grep  "eth0$"|egrep "([0-9]{1,3}\.){3}[0-9]{1,3}"
   ip a s eth0 | grep  "eth0$"|egrep "([0-9]{1,3}\.?){4}"
   ip a s eth0 | grep  "eth0$"|egrep "([0-9]{1,3}\.?){4}" -o|head -1

\ 可以将扩展正则转换为普通正则

   [root@oldboyedu ~]# echo "100000 oldboy"|egrep "[0-9]+"
   100000 oldboy
   [root@oldboyedu ~]# echo "100000 oldboy"|grep "[0-9]\+"
   100000 oldboy
[root@oldboyedu ~]# grep -vwE  "[0-9]{18}" /oldboy/test.txt 
   王五   10101010100101
   周六   101010101010220101010

扩展:
grep -r 要找的内容 /所找目录
tar zcvf ./压缩名 ./要压缩的文件
zgre -a 要过滤的内容 指定压缩包-------过滤压缩信息

系统三剑客 sed

作用: 修改文件内容 对文件行进行操作
sed -stream editor for filtering and transforming text
字符流文件修改

sed命令主要用于处理 配置文件 文本文件

sed命令语法结构
sed 参数 '/条件/ 指令' 文件信息
sed -n '/install/'

sde命令执行原理:

sed命令原理.png

sed操作方法

增:在文件中添加信息
删:将文件中指定信息删除
改:修改替换文件内容
查:查找相应内容信息

查看文件信息==grep
第一种方式:按指定行查询内容
sed -n '3p' person.txt --- 单行过滤
sed -n '2,5p' person.txt(文件信息) --- 连续多行过滤
sed -n '2p;4p' 文件信息 --- 显示不连续的行信息过滤

第二种方式:按指定内容进行过滤
sed -n '/内容信息/p' 文件信息
sed -n '/CTO/,/CIO/p' person.txt --- 按照信息过滤连续行 (中间匹配到的内容也会继续输出 原理是一行一行的匹配)

sed执行原理2.png

第三种方式:只查找指定行
sed -n '/oldboy/p;/yy/p' person.txt

增文件信息 1i---前面 1a---后面 $a---文件最后

方式一:在指定行后面添加信息

   sed '2aoldboy' person.txt --- 第二行
   sed '$aoldboy' person.txt --- 最后一行

方式二:在指定行前面添加信息

     sed '1ioldboy' person.txt --- 一行前面

方式三:不连续多行添加信息

     sed -e '2aoldboy' -e '4aoldboy' person.txt

方式四:指定行后面添加多行内容

      sed -e '2aoldboy\noldgirl\noldbaby' person.t

方式五:连续多行后面添加信息

        sed -e '1,3aoldboy' person.txt

删除指定信息
方式一:按行删除指定信息

       sed '3d' person.txt 

方式二:删除指定内容行

      sed -r '/oldboy|yy/d' person.txt 

删除/etc/service文件中注释行和空行

       方法一 sed -r '/^$|^#/d' /etc/services
       方法二  sed -rn '/^$|^#/!p' /etc/services

连续删除多行信息

         sed -r '/信息/,/信息/d' /文件信息

替换内容

   sed -r '/IPADDR/s#(IP.*=)10.0.0.200#\110.0.0.201#g' /etc/sysconfig/network-scripts/ifcfg-eth0

利用 & 可以实现后项应用前项正则匹配到的信息

[root@oldboyedu ~]# echo "123456"|sed 's#[0-9]+#<&>#g'
123456
[root@oldboyedu ~]# echo "123456"|sed 's#[0-9]\+#<&>#g'
<123456>
[root@oldboyedu ~]# echo "123456"|sed -r 's#[0-9]{1}#<&>#g'
<1><2><3><4><5><6>

利用sed命令取出IP地址

第一个里程: 有什么命令可以显示IP地址
ip a s eth0  = ip address show eth0 
ifconfig eth0
第二个里程: 筛选出指定行
ip a s eth0|sed -n '3p'
第三个里程: 
ip a s eth0|sed -n '3p'|sed -r 's#^.*t (.*)#\1#g'|sed -r 's#(.*)/24.*$#\1#g'
sed -r 's#^.*t (.*)#\1#g'
sed -r 's#(.*)/24.*$#\1#g'
ip a s eth0|sed -n '3p'|sed -r 's#^.*t (.*)/24.*$#\1#g'
sed -n '3p'
sed -r 's#^.*t (.*)/24.*$#\1#g'
ip a s eth0|sed -nr '3s#^.*t (.*)/24.*$#\1#gp'

利用sed命令获取文件属性权限数值

stat /etc/hosts|sed  -n '4p'|sed -r 's#^A.*\((.*)/-.*$#\1#g'
0644

常见错误一:
[root@oldboyedu ~]# sed -n '/oldboy/p' person.txt 
101,oldboy,CEO
[root@oldboyedu ~]# sed -n '/oldboy/s#oldboy#oldgirl#gp' person.txt 
101,oldgirl,CEO
[root@oldboyedu ~]# sed -ni '/oldboy/s#oldboy#oldgirl#gp' person.txt 
[root@oldboyedu ~]# cat person.txt 
101,oldgirl,CEO
说明: sed命令参数-n和-i不能同时使用

常见错误二:
[root@oldboyedu ~]# sed -in '/oldboy/s#oldboy#oldgirl#gp' person.txt 
[root@oldboyedu ~]# cat person.txt
101,oldgirl,CEO
101,oldgirl,CEO
102,zhaoyao,CTO
103,Alex,COO
104,yy,CFO
105,feixue,CIO
[root@oldboyedu ~]# ll person.txt
person.txt   person.txtn  
[root@oldboyedu ~]# ll person.txt

说明: 使用sed命令-i参数一定放置在所有参数最后面

sed命令替换整行内容:

[root@oldboyedu ~]# sed -i '3coldboy' person.txt 
[root@oldboyedu ~]# cat person.txt 
101,oldboy,CEO
102,zhaoyao,CTO
oldboy
104,yy,CFO
105,feixue,CIO

如何批量修改文件扩展命令

[root@oldboyedu oldboy]# touch oldboy{01..10}.txt
[root@oldboyedu oldboy]# ll
total 0
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy01.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy02.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy03.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy04.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy05.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy06.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy07.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy08.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy09.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy10.txt

如何将.txt扩展名批量改为.jpg

[root@oldboyedu oldboy]# ls|xargs -n1|sed -r 's#(.*)\.txt#mv & \1.jpg#g'
mv oldboy01.txt oldboy01.jpg
mv oldboy02.txt oldboy02.jpg
mv oldboy03.txt oldboy03.jpg
mv oldboy04.txt oldboy04.jpg
mv oldboy05.txt oldboy05.jpg
mv oldboy06.txt oldboy06.jpg
mv oldboy07.txt oldboy07.jpg
mv oldboy08.txt oldboy08.jpg
mv oldboy09.txt oldboy09.jpg
mv oldboy10.txt oldboy10.jpg
[root@oldboyedu oldboy]# ls|xargs -n1|sed -r 's#(.*)\.txt#mv & \1.jpg#g'|bash
[root@oldboyedu oldboy]# ll
total 0
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy01.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy02.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy03.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy04.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy05.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy06.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy07.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy08.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy09.jpg
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy10.jpg

专业批量修改文件命令 rname
语法: rename '名称中要改的信息' '修改成什么' 将什么文件做修改
# rename '名称中要改的信息' '修改成什么' 将什么文件做修改
# rename '.jpg' '.txt' oldboy *

# ll
total 0
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy01.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy02.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy03.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy04.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy05.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy06.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy07.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy08.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy09.txt
-rw-r--r-- 1 root root 0 Jul 24 11:37 oldboy10.txt

hostname -I

10.0.0.200