第七章、grep及正则表达式
04_04_grep及正则表达式
grep家族： grep, egrep, fgrep
grep: 根据模式搜索文本，并将符合模式的文本行显示出来。
Pattern: 文本字符和正则表达式的元字符组合而成匹配条件
grep [options] PATTERN [FILE...]
-i：忽略大小写
--color：匹配到的字符带颜色
-v:：显示没有被模式匹配到的行
-o：只显示被模式匹配到的字符串
通配符：
1. *: 任意长度的任意字符
2. ?: 任意单个字符
3. []:
4. [^]:
正则表达式：REGular EXPression, REGEXP
元字符：
1. .: 匹配任意单个字符
2. []: 匹配指定范围内的任意单个字符
3. [^]：匹配指定范围外的任意单个字符
字符集合：[:digit:], [:lower:], [:upper:], [:punct:], [:space:], [:alpha:], [:alnum:]
匹配次数（贪婪模式）：
1. *: 匹配其前面的字符任意次
e.g: 有：a, b, ab, aab, acb, adb, amnb，下面pattern会匹配那些字符串？
a*b: b, ab,aab
a?b: b, ab
a.*b: ab, aab, acb, adb, amnb
.*: 任意长度的任意字符
2. \?: 匹配其前面的字符1次或0次
3. \{m,n\}:匹配其前面的字符至少m次，至多n次
\{1,\} - 至少1次
\{0,3\} - 至多3次
位置锚定：
1. ^: 锚定行首，此字符后面的任意内容必须出现在行首
2. $: 锚定行尾，此字符前面的任意内容必须出现在行尾
^$: 空白行
3. \<或\b: 锚定词首，其后面的任意字符必须作为单词首部出现
4. \>或\b: 锚定词尾，其前面的任意字符必须作为单词的尾部出现
分组：
\(\)
\(ab\)*：ab作为整体，出现n次
后向引用
\1: 引用第一个左括号以及与之对应的右括号所包括的所有内容
\2:
\3:
e.g:
He love his lover.
She like her liker.
He like his lover.
grep '\(l..e\).*\1' test.txt 匹配到1, 2行
练习：
1、显示/proc/meminfo文件中以不区分大小的s开头的行；
grep -i '^s' /proc/meminfo
grep '^[sS]' /proc/meminfo
2、显示/etc/passwd中以nologin结尾的行;
grep 'nologin$' /etc/passwd
取出默认shell为/sbin/nologin的用户列表
grep "nologin$' /etc/passwd | cut -d: -f1
取出默认shell为bash，且其用户ID号最小的用户的用户名
grep 'bash$' /etc/passwd | sort -n -t: -k3 | head -1 | cut -d: -f1
3、显示/etc/inittab中以#开头，且后面跟一个或多个空白字符，而后又跟了任意非空白字符的行；
grep "^#[[:space:]]\{1,\}[^[:space:]]" /etc/inittab
4、显示/etc/inittab中包含了:一个数字:(即两个冒号中间一个数字)的行；
grep ':[0-9]:' /etc/inittab
5、显示/boot/grub/grub.conf文件中以一个或多个空白字符开头的行；
grep '^[[:space:]]\{1,\}' /boot/grub/grub.conf
6、显示/etc/inittab文件中以一个数字开头并以一个与开头数字相同的数字结尾的行；
grep '^\([0-9]\).*\1$' /etc/inittab
练习：
1、找出某文件中的，1位数，或2位数；
grep '[0-9]\{1,2\}' /proc/cpuinfo
grep --color '\<[0-9]\{1,2\}\>' /proc/cpuinfo
2、找出ifconfig命令结果中的1-255之间的整数；
需要使用扩展正则表达式
ifconfig | egrep --color '\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-9][0-9])\>'
3、查找当前系统上名字为student(必须出现在行首)的用户的帐号的相关信息, 文件为/etc/passwd
grep '^student\>' /etc/passwd | cut -d: -f3
id -u student
student1
student2
练习：
分析/etc/inittab文件中如下文本中前两行的特征(每一行中出现在数字必须相同)，请写出可以精确找到类似两行的模式：
l1:1:wait:/etc/rc.d/rc 1
l3:3:wait:/etc/rc.d/rc 3
grep '^l\([0-9]\):\1.*\1$' /etc/inittab
05_01_egrep及扩展正则表达式
复习：
REGEXP：REGular EXPression
Pattern：模式
正则表达式：
Basic REGEXP：基本
Extended REGEXP：扩展
基本正则表达式：
.:
[]:
[^]:
次数匹配：
*:
\?: 0或1次
\{m,n\}：至少m次，至多n次；
.*:
锚定：
^:
$:
\<, \b:
\>, \b:
\(\)
\1, \2, \3, ...
grep：使用基本正则表达式定义的模式来过滤文本的命令；
-i
-v
-o
--color
-E: 使用扩展正则表达式
-A n: 显示匹配到的行和其后的n行
-B n: 前的n行
-C n: 前后各n行
扩展正则表达式：省略很多反斜线
字符匹配：
.
[]
[^]
次数匹配：
*:
?:
+: 匹配其前面的字符至少1次，\{1,\}
{m,n}:
位置锚定：
^
$
\<
\>
分组：
()：分组
\1, \2, \3, ...
或者
|: or
C|cat: C或cat， 不是Cat或cat，这个用 '(C|c)at'
grep -E = egrep
4、显示所有以数字结尾且文件名中不包含空白的文件；
bash特性详解时的未解问题
ls .*[^[[:space:]].*[0-9]$
找出/boot/grub/grub.conf文件中1-255之间的数字；
\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>
找出ifconfig中的IP地址
ifconfig | egrep '\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>'
ifconfig | egrep --color '(\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.){3}\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>'
找出ifconfig中的ABC 3类IP地址
IPv4:
5类：A B C D E
A：1-127
B：128-191
C：192-223
\<([1-9]|[1-9][0-9]|1[0-9]{2}|2[01][0-9]|22[0-3])\>(\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-4])\>){2}\.\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-4])\>
马哥51cto博客： http://mageedu.blog.51cto.com/
fgrep: 快速grep, 不支持正则表达式