grep 与正则表达式

正则表达式只是字符串的一种描述，只有和支持正则表达式的工具相结合才能进行字符串处理。本文以grep为例来讲解正则表达式。

grep命令

功能：输入文件的每一行中查找字符串。

基本用法：

grep [-acinv] [--color=auto] [-A n] [-B n] '搜寻字符串' 文件名
参数说明：
-a：将二进制文档以文本方式处理
-c：显示匹配次数
-i：忽略大小写差异
-n：在行首显示行号
-A：After的意思，显示匹配字符串后n行的数据
-B：before的意思，显示匹配字符串前n行的数据
-v：显示没有匹配行-A：After的意思，显示匹配部分之后n行-B：before的意思，显示匹配部分之前n行
--color：以特定颜色高亮显示匹配关键字

‘搜寻字符串’是正则表达式，注意为了避免shell的元字符对正则表达式的影响，请用单引号（’’）括起来，千万不要用双引号括起来（"”）或者不括起来。

正则表达式分为基本正则表达式和扩展正则表达式。下面分别简单总结一下。

基本正则表达式

正则表达式学习，主要是对正则表达式元数据的学习。正则表达式本身没有什么高深的东西，本文仅仅对基本正则表达式的元数据进行一下总结：

　　\s  \b \S都是支持的，以及如下：

元数据	意义和范例
^word	搜寻以word开头的行。 例如：搜寻以#开头的脚本注释行 grep –n ‘^#’ regular.txt
word$	搜寻以word结束的行 例如，搜寻以‘.’结束的行 grep –n ‘.$’ regular.txt
.	匹配任意一个字符。 例如：grep –n ‘e.e’ regular.txt 匹配e和e之间有任意一个字符，可以匹配eee，eae，eve，但是不匹配ee。
\	转义字符。 例如：搜寻’，’是一个特殊字符，在正则表达式中有特殊含义。必须要先转义。 grep –n ‘\” regular.txt
*	前面的字符重复0到多次。 例如匹配gle，gogle，google，gooogle等等 grep –n ‘go*gle’ regular.txt
[list]	匹配一系列字符中的一个。 例如：匹配gl，gf。 grep –n ‘g[lf]’ regular.txt
[n1-n2]	匹配一个字符范围中的一个字符。 例如：匹配数字字符 grep –n ‘[0-9]’ regular.txt
[^list]	匹配字符集以外的字符 例如：grep –n ‘[^o]‘ regular.txt 匹配非o字符
\{n1,n2\}	前面的字符重复n1，n2次 例如：匹配google，gooogle。 grep –n ‘go\{2,3\}gle’ regular.txt
\<word	单词是的开头。 例如：匹配以g开头的单词 grep –n ‘\<g’ regular.txt
word\>	匹配单词结尾 例如：匹配以tion结尾的单词 grep –n ‘tion\>’ regular.txt

扩展正则表达式

grep一般情况下支持基本正则表达式，可以通过参数-E支持扩展正则表达式，另外grep单独提供了一个扩展命令叫做egrep用来支持扩展正则表达式，这条命令和grep -E等价。虽然一般情况下，基本正则表达式就够用了。特殊情况下，复杂的扩展表达式，可以简化字符串的匹配。

扩展正则表达式就是在基本正则表达式的基础上，增加了一些元数据。

元数据	意义和范例
+	重复前面字符1到多次。 例如：匹配god，good，goood等等字符串。 grep –nE go+d’ regular.txt
?	匹配0或1次前面的字符 例如，匹配gd，god grep –nE ‘go?d’ regular.txt
|	或（or）的方式匹配多个字串   例如：grep –nE ‘god|good’ regular.txt 匹配god或者good。
()	匹配整个括号内的字符串，原来都是匹配单个字符 例如：搜寻good或者glad grep –nE ‘g(oo|la)’ regular.txt
()	前面的字符重复0到多次。 例如匹配gle，gogle，google，gooogle等等 grep –nE ‘go*gle’ regular.txt

POSIX字符类

[:alnum:]

文字数字字符

[:alpha:]

非数字字符字符

[:digit:]

数字字符

[:graph:]

非空字符（非空格、控制字符）

[:lower:]

小写字符

[:cntrl:]

控制字符

[:print:]

非空字符（包括空格）

[:punct:]

标点符号

[:space:]

所有空白字符（新行，空格，制表符）

[:upper:]

大写字符

[:xdigit:]

十六进制字符

实例

1、显示/proc/meminfo文件中以大小写s开头的行；
        grep [Ss]  /proc/meminfo
    2、取出默认shell为非bash的用户； 
      grep -v 'bash' /etc/passwd
    3、取出默认shell为bash的且其ID号最大的用户；
        grep 'bash' /etc/passwd | cut -d: -f3 |sort |tail -1
    4、显示/etc/rc.d/rc.sysinit文件中，以#开头，后面跟至少一个空白字符，而后又有至少一个非空白字符的行；
       grep '^#[[:space:]]\{1,\}[[:space:]]\{1,\}'  /etc/rc.d/rc.sysinit
    5、显示/boot/grub/grub.conf中以至少一个空白字符开头的行；
            grep '^[[:space:]]\{1,}' /boot/grub/grub.conf
    6、找出/etc/passwd文件中一位数或两位数；
            grep '\<[0-9]\{1,2\}\>' /etc/passwd
    7、找出ifconfig命令结果中的1到255之间的整数；
                ifconfig eth0|egrep '2[0-5][0-5]|1[0-9][0-9]|[1-9][0-9]|[0-9]'
    8、查看当前系统上root用户的所有信息;
                  grep '\<root\>' /etc/passwd
    9、添加用户bash和testbash、basher，而后找出当前系统上其用户名和默认shell相同的用户；

grep '^\([[:alpha:]]\{1\}\.*\1$'  /etc/passwd

10、找出netstat -tan命令执行的结果中以“LISTEN”或“ESTABLISHED”结尾的行；

netstat -tan |egrep 'LISTEN|ESTABLISHED[[:space:]]\{1,\}$'
    11、取出当前系统上所有用户的shell，要求：每种shell只显示一次，且按升序显示；