正则表达式 、 sed基本用法 、 sed应用案例

链接

一,变量中字符串的处理

编写脚本,可以实现批量修改文件扩展名

#!/bin/bash
#批量修改扩展名
touch abc{1..10}.txt
for i in $(ls *.txt)   //找到所有的txt文件交给for循环
do
    n=${i%.*}   //用去尾的方法删除扩展名
    mv $i $n.doc   //再将源文件扩展名修改为doc
done

改良版:

#!/bin/bash
for i in $(ls *.$1)    //要改什么类型的文件用$1位置变量表示
do
    n=${i%.*}
    mv $i $n.$2   //要改成什么类型,用$2表示
done

定义变量初值(备用值)

${变量名:-初值}

${变量名:} 截取

${变量名/} 替换

${变量名#} 掐头

${变量名%} 去尾

${变量名:-} 定义初值


二,正则表达式,可以使用若干符号配合某工具对文档进行增删改查等操作

head -5 /etc/passwd > user      //准备素材
图片1.png
grep ^root user    //找以root开头的行
grep bash$ user     //找以bash结尾的行
grep ^$ user   //找空行
grep -v ^$ user  //显示除了空行的内容
grep "[root]" user    //找rot任意一个字符 
grep "[rot]" user    //效果同上
grep "[^rot]" user   //显示r或o或t以外的内容
grep "[0123456789]" user   //找所有数字
grep "[0-9]" user    //效果同上
grep "[^0-9]" user   //显示数字以外内容
grep "[a-z]" user    //找所有小写字母
grep "[A-Z]" user    //找所有大写字母
grep "[a-Z]" user    //找所有字母
grep "." user   //找任意单个字符,文档中每个字符都可以理解为任意字符
grep "r..t" user  //找rt之间有2个任意字符的行
grep "r.t" user  //找rt之间有1个任意字符的行,没有匹配内容,就无输出
grep "*" user   //错误用法,*号是匹配前一个字符任意次,不能单独使用
grep "ro*t" user   //找rt,中间的o有没有都行,有几次都行
grep ".*" user  //找任意,包括空行 .与*的组合在正则中相当于通配符的效果
grep "ro\{1,2\}t" user  //找rt,中间的o可以有1~2个
grep "ro\{2,6\}t" user  //找rt,中间的o可以有2~6个
grep "ro\{1,\}t" user  //找rt,中间的o可以有1个以及1个以上
grep "ro\{3\}t" user   //找rt,中间的o必须只有有3个
grep "\(0:\)\{2\}" user  //找连续的2个0:  小括号的作用是将字符组合为一个整体
图片2.png

以上命令均可以加-E选项并且去掉所有\,改成扩展正则的用法,比如

grep "ro\{1,\}t" user可以改成 grep -E "ro{1,}t" user    

或者

egrep "ro{1,}t" user   
grep "ro\{1,\}t" user   //使用基本正则找o出现1次以及1次以上
egrep "ro{1,}t" user   //使用扩展正则,效果同上,比较精简
egrep "ro+t" user   //使用扩展正则,效果同上,最精简
grep "roo\{0,1\}t" user   //使用基本正则找第二个o出现0~1次
egrep "roo{0,1}t" user   //使用扩展正则,效果同上,比较精简
egrep "roo?t" user   //使用扩展正则,效果同上,最精简
[root@svr7 opt]# cat abc.txt    //准备文档素材,里面有一些带the的行
the
there
6the_
the#
abthe
egrep  "the\b" abc.txt   //在abc.txt文件中找the,右边不允许出现数字、字母、下划线
egrep  "\bthe\b" abc.txt   //两边都不允许出现数字、字母、下划线
egrep  "\" abc.txt   //效果同上
egrep "^root|^bin" user  //找以root或者以bin开头的行

三,sed

对文档非交互式增删改查 : 逐行处理

用法:

1, 前置指令 | sed 选项 条件 指令

2, sed 选项 条件 指令 被处理文档

选项: -n 屏蔽默认输出 -r 支持扩展正则 -i 修改源文件

指令: p 输出 d 删除 s 替换

sed -n 'p' user    //输出所有行
sed -n '1p' user   //输出第1行
sed -n '2p' user   //输出第2行
sed -n '3p' user    //输出第3行
sed -n '2,4p' user   //输出2~4行
sed -n '2p;4p' user   //输出第2行与第4行
sed -n '2,+1p' user   //输出第2行以及后面1行
sed -n '/^root/p' user   //输出以root开头的行  
sed -n '/root/p' user   //输出包含root的行
sed -nr '/^root|^bin/p' user   //输出以root开头的行或bin开头的行
sed -n '1!p' user   //输出除了第1行的内容
sed -n '$p' user   //输出最后一行
sed -n '$=' user   //输出最后一行的行号
sed 's/2017/6666/' test.txt   //把所有行的第1个2017替换成6666
sed 's/2017/6666/2' test.txt  //把所有行的第2个2017替换成6666
sed '1s/2017/6666/' test.txt  //把第1行的第1个2017替换成6666
sed '3s/2017/6666/3' test.txt  //把第3行的第3个2017替换成6666
sed '3s/2017//3' test.txt  //把第3行的第3个2017替换成空,相当于删除
sed '/2024/s/2017/6666/' test.txt  //找到有2024的行,将2017替换成6666
sed 's/2017/6666/g' test.txt   //替换所有行的所有2017为6666
/bin/bash  改成  /sbin/sh
sed 's//bin/bash//sbin/sh/' user     //直接替换,报错
sed 's/\/bin\/bash/\/sbin\/sh/' user   //使用转义符号可以成功,但不方便
sed 's!/bin/bash!/sbin/sh!' user   //最佳方案,更改s的替换符
sed 's(/bin/bash(/sbin/sh(' user   //替换符号可以用所有数字键上的

编写脚本,安装httpd服务,需要使用82号端口开启服务

以下三个方式都可以替换

sed -i  ‘/^Listen 80/s/0/2/’  /etc/httpd/conf/httpd.conf
sed -i  ‘42s/0/2/’  /etc/httpd/conf/httpd.conf
sed -i  ‘s/Listen 80/Listen 82/’  /etc/httpd/conf/httpd.conf
#!/bin/bash
yum -y install httpd &> /dev/null
sed -i '/^Listen 80/s/0/2/' /etc/httpd/conf/httpd.conf
systemctl restart httpd
systemctl enable httpd
echo "web-test~~~"  > /var/www/html/index.html
setenforce 0  //脚本执行前要关闭selinux
curl 192.168.4.7:82  //测试82端口访问页面

编写脚本,找到系统使用bash的账户名,然后按照

“ 用户名 --> 密码 ” 的格式存储在一个文件中

以下两种方法都可以找到使用bash的用户名

sed -n '/bash$/p' /etc/passwd | sed 's/:.*//'
sed -n '/bash$/s/:.*//p' /etc/passwd
#!/bin/bash
u=$(sed -n '/bash$/p' /etc/passwd | sed 's/:.*//')    //使用sed找到使用bash的用户,然后用替换功能删除无用信息只留下名字,再赋值给变量u
for i in $u   //将这些用户名交给循环处理
do
n=$(grep $i /etc/shadow)   //按照不同用户名找密码信息
n1=${n#*:}           //掐头
n2=${n1%%:*}   //去尾,留下纯粹的密码
echo "$i --> $n2"  >>  a.txt   //按格式追加重定向到a.txt文件
done

运维课程需要的环境

情况一:如果电脑是Windows的话:

创建虚拟机,用最小化方式安装,按要求配置好ip,同网段之间要能互通,配置好yum,修改主机名

proxy 192.168.2.5(vmnet2) 192.168.4.5(vmnet4) //必须

web1 192.168.2.100(vmnet2) //必须

web2 192.168.2.200(vmnet2) //必须

client 192.168.4.10(vmnet4) //可选,主要作为测试,如果没有该主机将来可以用真机测试

真机要安装火狐浏览器

上述需求可以参考视频:

链接:https://pan.baidu.com/s/1d8H9bqsJ83eQOSsvNeYWOA

提取码:11ie

情况二:如果电脑是Linux的话

在码云找 operation环境准备.docx 这个文档,里面有安装过程


练习:

1 简述grep工具的-q选项的含义(egrep同样适用)。

2 正则表达式中的+、?、*分别表示什么含义?

3 如何编写正则表达式匹配11位的手机号?

4 简述sed条件的作用及表示方式。


参考答案:

1 简述grep工具的-q选项的含义(egrep同样适用)。

选项-q的作用是静默、无任何输出,效果类似于正常的grep操作添加了&> /dev/null来屏蔽输出

2 正则表达式中的+、?、*分别表示什么含义?

这三个字符用来限制前面的关键词的匹配次数,含义分别如下:

+:最少匹配一次,比如a+可匹配a、aa、aaa等

?:最多匹配一次,比如a?可匹配零个或一个a

:匹配任意多次,比如a可匹配零个或任意多个连续的a

3 如何编写正则表达式匹配11位的手机号?

准备测试文件:

[root@svr5 ~]# cat tel.txt

01012315

137012345678

13401234567

10086

18966677788

提取包含11位手机号的行:

[root@svr5 ~]# egrep '^1[0-9]{10}$' tel.txt //这里^代表以数字1开头,后面有10个数字作为结尾

13401234567

18966677788

4 简述sed条件的作用及表示方式。

作用:条件控制sed需要处理文本的范围,不加则逐行处理所有行

表示方式:条件可以使用行号或正则表达式

你可能感兴趣的:(正则表达式 、 sed基本用法 、 sed应用案例)