Shell脚本之正则表达式以及文本编辑器
目录
一、正则表达式
1.定义
2.元字符
元字符使用（这里举例为常用的元字符）
3.表示次数
（1）匹配字符
（2）查看子网掩码信息
4. 位置锚定
5.扩展正则表达式
（1）表示次数
（2）表示分组
二、文本编辑器
1.sed
（1）定义
（2）功能
（3）基本用法
（4）sed脚本格式
三、总结
一、正则表达式
1.定义
正则表达式，由一类特殊字符及文本字符所编写的模式，其中有些字符(元字符)不表示字符字面意义，而表示控制或通配的功能,类似于增强版的通配符功能，但与通配符不同，通配符功能是用来处理文件名，而正则表达式是处理文本内容中字符，主要用来匹配字符串(命令结果,文本内容)，通配符匹配文件(而且是已存在的文件)
我们可以使用man手册查看使用方法
man 7 regex
2.元字符
| 符号 | 功能 |
|---|---|
| . | 匹配任意单个字符，可以是一个汉字 |
| * | 匹配前面子表达式0次或者多次 |
| [ ] | 匹配指定范围内的任意单个字符 |
| [^] | 匹配指定范围外的任意单个字符 |
| \转义字符 | 用于取消特殊符号的含义 |
| ^ | 匹配字符串开始的位置 |
| $ | 匹配字符串结束的位置 |
| {n} | 匹配前面的子表达式n次 |
| {n,} | 匹配前面的子表达式不少于n次 |
| {n,m} | 匹配前面的子表达式n到m次 |
| [:alnum:] | 字母和数字 |
| [:alpha:] | 代表任何英文大小写字符，即A-Z a-z |
| [:lower:] | 小写字母 |
| [:upper:] | 大写字母 |
| [:blank:] | 空白字符（空格和制表符） |
| [:space:] | 包括空格、制表符（水平和垂直）、换行符、回车符等各种类型的空白 |
| [:cntrl:] | 不可打印的控制字符（退格、删除、警铃...） |
| [:digit:] | 十进制数 |
| [:xdigit:] | 十六进制 |
| [:graph:] | 可打印的非空白字符 |
| [:print:] | 可打印字符 |
| [:punct:] | 标点符号 |
| \w | 匹配单词构成部分，等价于**[:alnum:]** |
| \W | 匹配非单词构成部分，等价于[:alnum:] |
| \S | 匹配任何非空白字符，等价于[**^ \ f \ n \ r \ t \ v]** |
| \s | 匹配任何空白字符，包括空格，制表符，换页符等等，等价于[ \ f \ n \ r \ t ] |
元字符使用（这里举例为常用的元字符）
（1）“ . ”
（2）“ 【】”
（3）“ * ”
（4） “ ^ ”
（5）“ space空格 ”
（6）或者
3.表示次数
（1）匹配字符
（2）查看子网掩码信息
4. 位置锚定
5.扩展正则表达式
与基础正则表达式相差不大
（1）表示次数
（2）表示分组
查看子网掩码信息方法二
二、文本编辑器
1.sed
（1）定义
sed即Stream EDitor，和vim编辑器不同，sed是行编辑器
（2）功能
Sed是从文件或管道中读取一行,处理一行，输出一行;再读取-行,再处理一行,再输出- -行，直到最后一行。每当处理一行时，把当前处理的行存储在临时缓冲区中,称为模式空间(PatternSpace) ，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复,直到文件末尾。一次处理一行的设计模式使得sed性能很高 , sed在读取大文件时不会出现卡顿的现象。如果使用vi命令打开几十M上百M的文件，明显会出现有卡顿的现象,这是因为vi命令打开文件是一-次性将文件加载到内存，然后再打开。Sed就避免了这种情况，一行一行的处理,打开速度非常快，执行速度也很快
（3）基本用法
se管道d [ option ] . . . 'script:script:....' [input file...]
选项 自身脚本语法 支持标准输入管道
常用选项
（4）sed脚本格式
单引号中间需要写脚本；脚本格式如下
组成：'地址+命令'组成
1，不给地址:对全文进行处理(比如行号)
2，单地址:
#:指定的行，$最后一行
/pattern/:被此处模式所能够匹配到的每一行
3.地址范围:
#,# #从#行到第#行，3，6从第3行到第6行
#,+# #从#行到+#行，3,+4 表示从3行到第7行
/pat1/ ,/pat2/第一 个正则表达式和第二个正则表达式之间的行
4.步进: ~
1~2奇数行
2~2偶数行
命令选项
| 选项 | 功能 |
| s | 替换，替换指定宁符 |
| d | 删除，删除选定的行 |
| a | 增加，在当前行下面增加一行指定内容 |
| i | 插入，在选定行上面插入一行指定内容 |
| c | 替换，将选定行替换为指定内容 |
| y | 字符转换，转换前后的宁符长度必须相同 |
| p | 打印，如果同时指定行，表示打印指定行;如果不指定行，则表示打印所有内容;如果有非打印 字符，则以ASCIl码输出。其通常与“-n”选项一起使用。=:打印行号 |
| l | 打印数据流中的文本和不可打印的ASCIl字符(比如结束符$、制表符lt) |
修改文件内容
分组
查看子网掩码方法三
2.awk
（1）定义
awk:. Aho, Weinberger, Kernighan,报告生成器，格式化文本输出，GNU/Linux发布的AWK目前由自由软件基金会(FSF) 进行开发和维护，通常也称它为GNU AWK
在Linux/UNIX系统中，awk 是一个功能强大的编辑工具，逐行读取输入文本，默认以空格或tab键作为分隔符，并按模式或者条件执行编辑命令。而awk比较倾向于将一行分成多个字段然后进行理。AWK信息的读入也是逐行
（2）功能
指定的匹配模式进行查找，对符合条件的内容进行格式化输出或者过波处理，可以在无交互的情况下实现相当复杂的文本操作，被广泛应用于Shell脚本，完成各种自动化配置任务
（3）工作原理
前面提到sed命令常用于-整行的处理,而 awk比较倾向于将一行分成多个”字段然后再进行处理，且默认情况下字段的分隔符为空格或tab键。awk 执行结果可以通过print的功能将字段数据打印显示
（4）格式
awk [选项参数] 'script' var=value file(s)
awk 选项 ‘模式条件{操作}’ 文件1 文件2
或
awk [选项参数] -f scriptfile var=value file(s)
awk -f|-v 脚本文件 文件1 文件2
常用选项
| 选项 | 功能 |
| -F | 指定输入文件折分隔符 |
| -f |
赋值一个用户定义变量 |
| -v | 从脚本文件中读取awk命令 |
（5）实例展示
1.基础演示
2.查看ip地址方法四
3.指定分隔符进行筛选信息
（1）我们先筛选出已用%这一列内容
（2）现在我们要吧%号去掉
这是第一种写法
我们还可以有第二种写法
（3）根据分隔符筛选并导入文件
4.搜索符（//）进行筛选ip
（6）awk常用内置变量
| 变量 | 功能 |
| ES | 指定每行文本的字段分隔符，缺省为空格或制表位。与“F"作用相同-v"FS=:" |
| NF | 当前处理的行的字段个数 |
| NR | 当前处理的行的行号(序数) |
| $0 | 当前处理的行的整行内容 |
| $n |
当前处理行的第n个字段(第n列) |
| FILENAME | 被处理的文件名 |
| RS | 行分隔符 |
我们对passwd文件进行筛选
三、总结
今天讲了正则表达式以及文本编辑器相关内容，希望可以帮助到大家！ ++