Linux之grep及正则表达式

grep简介

　　grep 是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。通常grep有三种版本grep、egrep（等同于grep -E）和fgrep。egrep为扩展的grep，fgrep则为快速grep（固定的字符串来对文本进行搜索，不支持正则表达式的引用但是查询极为快速）。grep是Linux文本处理三剑客之一。

grep使用方式

　　使用方式：grep [OPTIONS] PATTERN [FILE...]

　　grep [OPTIONS] [-e PATTERN | -f FILE] [FILE...]

　　常用选项：

　　--color=auto：对匹配到的文本着色后进行高亮显示；

　　 -i：忽略字符的大小写

　　-o：仅显示匹配到的字符串

　　-v：显示不能被模式匹配到的行

　　-E：支持使用扩展的正则表达式

　　-q：静默模式，即不输出任何信息

　　-A #：显示被模式匹配的行及其后#行

　　-B #：显示被模式匹配的行及其前#行

　　-C #：显示被模式匹配的行及其前后各#行

　　注：使用grep匹配时需使用双引号引起来（单引号为强引用），防止被系统误认为参数或者特殊命令而报错。

扩展grep使用方式

　　使用方式：egrep [OPTIONS] PATTERN [FILE...]

　　grep -E [OPTIONS] PATTERN [FILE...]

　　-i：忽略字符的大小写
　　-o：仅显示匹配到的字符串本身
　　-v：显示不被模式匹配到的行
　　-q：静默模式，即不输出任何信息
　　-A #：显示被模式匹配的行及其后#行
　　-B #：显示被模式匹配的行及其前#行
　　-C #：显示被模式匹配的行及其前后各#行
　　-G:支持基本正则表达式

grep正则表达式元字符

　　‘^‘： 锚定行首

　　‘$’： 锚定行尾

　　‘.‘： 匹配任一一个字符

　　‘*’： 匹配零个或多个先前字符

　　‘\?‘：匹配其前面的字符0次或者1次；

　　‘\+’：匹配其前面的字符1次或者多次；

　　‘\{m\}‘：匹配其前面的字符m次（\为转义字符）

　　‘\{m,n\}’：匹配其前面的字符至少m次，至多n次

　　‘[]‘： 匹配一个指定范围内的字符 | ‘[^]’匹配指定范围外的任意单个字符

　　‘\<‘或‘\b’：锚定词首，‘\>’或‘\b’：锚定词尾（可用\<PATTERN\>：匹配完整单词）

　　‘\(\)’：将多个字符当做一个整体进行处理

　　后向引用：引用前面的分组括号中的模式所匹配到的字符

　　分组括号中的模式匹配到的内容或被正则表达式引擎自动记录于内部的变量中：

　　\1：模式从左侧起，第一个左括号及与之匹配的右括号之间模式匹配到的内容

　　\2：模式从左侧起，第二个左括号及与之匹配的右括号之间模式匹配到的内容...

　　扩展正则表达式与正则表达式略有不同：

　　'[]'：依旧匹配指定范围内的任意单个字符；但是有很多特殊匹配方式。

　　　　[:digit:] 匹配任意单个数字

　　　　[:lower:] 匹配任意单个小写字母               

　　　　[:upper:] 匹配任意单个大写字母

　　　　[:alpha:] 匹配任意单个字母

　　　　[:alnum:] 匹配任意单个字母或数字

　　　　[:punct:] 匹配任意单个符号

　　　　[:space:] 匹配单个空格

　　一些地方取消了转义字符的使用：

　　‘?‘：匹配其前面的字符0次或者1次；

　　‘+’：匹配其前面的字符1次或者多次；

　　‘{m}‘：匹配其前面的字符m次（\为转义字符）

　　‘{m,n}’：匹配其前面的字符至少m次，至多n次

　　()：将一个或多个字符捆绑在一起，当做一个整体进行处理，反向引用照常使用。

　　‘|’：或（注：‘C|cat’为C与cat，‘（C|c）at才是Cat与cat’）

练习题：

　　1、列出当前系统上所有已经登录的用户的用户名，注意：同一个用户登录多次，则只显示一次

[root@localhost ~]# who | cut -d' ' -f1|uniq
root

　　2、取出最后登录到当前系统的用户的相关信息

[root@localhost ~]# id `last | head - | cut -d' ' -f1`
uid=(root) gid=(root) groups=(root)

　　3.取出当前系统上被用户当做其默认shell最多的那个shell

[root@localhost ~]# cut -d':' -f7 /etc/passwd|uniq -c|sort -n|tail -|cut -d' ' -f7
/sbin/nologin

　　4.将/etc/passd中的第三个字段设置最大的后10个用户的信息全部改为大写保存至/tmp/maxuser.txt文件中

[root@localhost ~]# sort -t':' -k3 -n /etc/passwd|tail -|tr 'a-z' 'A-Z' >/tmp/maxusers.txt
[root@localhost ~]# cat /tmp/maxusers.txt
NOBODY:X:::NOBODY:/:/SBIN/NOLOGIN
SYSTEMD-NETWORK:X:::SYSTEMD NETWORK MANAGEMENT:/:/SBIN/NOLOGIN
NGINX:X:::NGINX WEB SERVER:/VAR/LIB/NGINX:/SBIN/NOLOGIN
CHRONY:X::::/VAR/LIB/CHRONY:/SBIN/NOLOGIN
POLKITD:X:::USER FOR POLKITD:/:/SBIN/NOLOGIN
SYSTEMD-BUS-PROXY:X:::SYSTEMD BUS PROXY:/:/SBIN/NOLOGIN
DINGJIE:X:::DINGJIE:/HOME/DINGJIE:/BIN/BASH
JEFF:X:::WOSHIDASHUAIBI:/HOME/JEFF:/BIN/BASH
EGON:X::::/HOME/EGON:/BIN/BASH
NFSNOBODY:X:::ANONYMOUS NFS USER:/VAR/LIB/NFS:/SBIN/NOLOGIN

　　5.取出当前主机的IP地址

[root@localhost ~]# ifconfig | egrep "inet.*broadcast.*"|cut -d' ' -f10
192.168.0.133

　　6.列出/etc目录下所有已.conf结尾的文件的文件名，并将其名字转换为大写后保存至/tmp/etc.conf文件中

[root@localhost ~]# find /etc -name '*.conf' | egrep -o "[^/]*(\.conf)$"|tr 'a-z' 'A-Z' >/tmp/etc.conf
[root@localhost ~]# cat /tmp/etc.conf
RESOLV.CONF
CA-LEGACY.CONF
FASTESTMIRROR.CONF
LANGPACKS.CONF
SYSTEMD.CONF
VERSION-GROUPS.CONF
LVM.CONF
LVMLOCAL.CONF
ASOUND.CONF
LDAP.CONF
MLX4.CONF
RDMA.CONF
SMTPD.CONF

　　7.显示/var目录下一级子目录或文件的总数

[root@localhost ~]# ls /var | wc -l

　　8.取出/etc/group第三个字段数值最小的10个组的名字

[root@localhost ~]# sort -t: -k3 -n /etc/group|head - |cut -d':' -f1
root
bin
daemon
sys
adm
tty
disk
lp
mem
kmem

　　9.将/etc/fstab和/etc/issue文件的内容合并为同一个内容后保存至/tmp/etc.test文件中

[root@localhost ~]# cat /etc/fstab /etc/issue > /tmp/etc.test
[root@localhost ~]# cat /tmp/etc.test 

#
# /etc/fstab
# Created by anaconda on Sat May  ::
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(), findfs(), mount() and/or blkid() for more info
#
/dev/mapper/cl-root     /                       xfs     defaults
UUID=2789d01a-4e2b-47a5-9c3c- /boot                   xfs     defaults
/dev/mapper/cl-swap     swap                    swap    defaults
\S
Kernel \r on an \m

　　对于正则表达式的使用需要多联系加强记忆，否则是用不好正则表达式的，在学习过程中切记多写多背。