什么是正则表达式


通过符号、符号与字母数字的组合,来描述文本的特征。这些字符不代表字符原本的意义,而是表示控制和通配。这此符号和符号与字母的组合称为元字符。


为什么要用正则表达式,用在什么地方。 


正则表达式可以匹配一段文本的特征,比如年月日,空白行,单词,一行文本,IP地址等。这样可以根据某些文本,然后查找到那些文件中包含了这些内容。还可以根据这些特征找到的文本进行复制,删除,替换,或者赋值给一个变量等。很多编程语言都支持正则表达式,它们可能支持的正则表达式引擎不同,表示方法略有不同。vi,grep,sed,awk等这些文本处理工具都支持正则表达式。这里主要用grep做演示。grep支持基本正则表达式,egrep支持扩展正则表达式,grep -E 相当于egrep。


与globbing的区别是正则用来做文本内容匹配,而globbing是做文件名匹配的。

globbing的表示字符

  * 表示任意长度的任意字符

  ? 任意的单个字符

   [] 在单个字符位置上,取方扩号字符中任意一个字符

        [abc] 表示a或b或c

   [^] 与[]意思反过来

        [^abc] 表示不是a或b或c


如何使用正则表达式介绍。


正则表达式分为基本正则表达式和扩展正则表达式。


基本正则表达式的元字符分有几种:字符匹配、次数匹配、位置锚定、分组、引用。


\  转义符号。在它后面一个字符不表示自己含意,而与\组成特别的意思。


 字符匹配,用来匹文本内容。

   . 匹配任意单个字符,可以匹配字母,数字,符号,空格。

   [] 指定范围内的单个字符

   [^] 指定不包括范围,^用来取反 

   [abc] 匹配a或b或c,这里不区分大小写的

   [1-9] 匹配1到9之间任意的数字

   [^a-z0-9] ^表示取反。匹配不包括字母和数据的。

     例如: grep '^r.'  /etc/passwd   表示在/etc/passwd文件中查找以小写的r为整个行的开头,在r后面跟了一个任意字母的行。如下显示。

     wKioL1PB-_OjnepuAAC4d3g4Nl8031.jpg

   [:space:] 表示空白,空格,tab,回车都是空白字符。 方扩号和扩号里的内容为一个整体,这个是固定写法。

   [:punct:] 表示所有的标点符号

   [:lower:] 表示所有的小写字母

   [:upper:] 表示所有的大写字母

   [:alpha:] 表示所有的字母

   [:digit:] 表示所有的数字

   [:alnum:] 表示所有的字母和数字

    例如:找到/etc/inittab文件中以字母开头的行

     grep '^[[:alnum:]].*' /etc/inittab

     wKiom1PB_DfCVAtmAAA4oZtA5_k246.jpg

  

 次数匹配:用于实现指定的字符所能够出现的次数

  * 前面字符的何意长度,仅能用于前面的字符所能够出现任意次。包括0次。

       例如:x*y 能够匹配到 xxy,xy,y。为什么有y呢,因为前面的x是任意次的。

  .*  点星表示任意长度的任意字符,这两个元字符组合起来相当于globbing中的*

  \? 前面的字符出现的次数可以出现0次或1次。或者前面的字符可有可无。

   例如: x\?y 可以匹配 xy,y

  \+ 前面的字符最少出现一次,多则不限

  \{m\} 前面的字的字符出现m次

   例如:x\{2\}y可以匹配 xxy,xxxxy等等

  \{m,n\} 前面出现的字符最少m次,最多n次,m这里要小于n。

   例如:x\{2,5\} 可以匹配 xxy,xxxy,xxxxy,xxxxxy。

  \{m,\} 前面的字符最少m次 ,多则不限。

  \{0,m\} 前面的字符可以不出现,如果出现最多可以出现m次

    例如:找到/etc/passwd文件中行首以r开头,中间o出现了两次后面都跟了一个小字字母的行。

      grep '^ro\{2\}[[:lower:]].*' /etc/passwd

     wKiom1PB_GrCqxyDAABFgpAnyOE599.jpg

 位置锚定,用来描述指定字符出现的位置。

  ^ 行首锚定,匹配的字符必须出现的行首。要写在模式最左则。

  $ 行尾锚定,写在模式最右则

  ^$ 表示空白行

  \< 词首锚定,要写在单词的左则

  \> 词尾锚定,要写在单词的尾部

  \b 词首词尾锚定。出现在词首词尾都可以。它等同于\<、\>中的任意一个。

     以字母数据组成不包含特殊字符这里叫做词

  例如:查找/etc/passwd文件中包含了home单词的行

   grep '\'  /etc/passwd  

   这是匹配到其中的一部分

    wKiom1PB_HrCkji5AAB9ZXln700852.jpg

 分组 ,分组是把扩号中的内容当作一个整体,用处是可以引用这个整体。

  \(\) 把几个字符当作一个整体

      \(ab\)* 表示ab可以出现任意次

\n  n代表一个数字, 引用 \n 引用第n个括号扩起来的内容。引用规则是第一个左括号(和与这个左扩号对应的右括号)之间的内容为第一部分,引用时用\1。第二个(和与之对应的)为第二部分引用时为\2。以此类推。

    \(1\(2\(3\)\)\)\(4\)\1\2\3\4 这个匹配结果就是12341232334

  例如一个文本文件里包含了以下内容,用引用做匹配。

    基本正则表达式与扩展正则表达式_第1张图片

  grep '\(1\(2\(3\)\)\)\(4\)\1\2\3\4' wukui

   wKiom1PB_L_xEQlvAAA3rtjKBN8382.jpg

  grep '\(1\(2\(3\)\)\).*\(4\)\1\2\3\4' wukui

   wKiom1PB_T6jnTsZAABJphwxfU4912.jpg

  例如:找到/etc/passwd中第一个单词与最后一个单词相同的用户,(就是用户名和SHELL相同)

   grep '\(^[^[:space:][:punct:]]*\>\).*\1$' /etc/passwd

   wKiom1PB_XfgZtDiAADO3Jg5UVU375.jpg


扩展正则表达式


扩展正则表达式,比基本正则表达多了一点匹配能力,有了“或”匹配能力。有些表达式用起来不用转义了。以下元字符中只有词首锚定和引用使用转义。 扩展正则表达式使用 grep -E 或 egrep 来使用。 


 字符匹配

  . 任意单个字符

  [] 指定范围

  [^] 指定不包括的范围,用来取反

 次数匹配

  * 任意次数

  ? 0次或1次

  + 到少一次,多则不限

  {m} 精确匹配m次

        {m,n} 至少m次,紧多n次

  {m,} 至少有m次,多则不限

  {0,n} 可以不出现,如果出现最多可以出现n次

    例如:找到/etc/passwd文件中行首以r开头,中间o出现了两次后面都跟了一个小字字母的行。

        grep -E  '^ro{2}[[:lower:]].*' /etc/passwd

wKioL1PB_XaClkE4AABPIzbNU9I959.jpg


 锚定 符,这个与基本正则表达式用法一样

  ^ 行首 锚定

  $ 行尾 锚定

  \<,\b 词首 锚定

  \>,\b 词尾 锚定

      ^$, 表示空白行

      ^[[:space:]]*$ 与上面一样,也是表示空白行

 分组 ,用法与基本正则表达式一样,写法只是不再用\转义了。

  () 把括号里的内容当作一个整体

 引用:

  用法与基本正则表达式一样

  \1,\2

 或者 在|前后多选一或二选一

  a|b a或b

  conC|cat 这里表示conC或者cat,如果想要|前后两个字符的匹配,则需要把前后两个字符用()扩起来。 ab(c|a)bc 这里表示abcbc或ababc 

  例如:找出/etc/passwd文件中以r开头或以b开头的行

  grep '^r|^b' /etc/passwd

  基本正则表达式与扩展正则表达式_第2张图片



匹配IPV4的正则表达式


(\<[1-9]{1,2}\>|(\<1[0-9]{1,2}\>)|(\<2[01][0-9]\>)|(22[0-3]))\.([0-2]?[0-9]{1,2}\.){2}[0-2]?[0-9]{1,2}


注:这个正则表达式能匹配到A,B,C类网络。广播地址,本地回环地址(127.开头的),自动DHCP地址(169.254.开头的)也都匹配到了,但这些地址不是正常使用的IP。

  

如有错误请帮忙指出j_0059.gif感谢!