linux学习笔记---grep

先来讲讲grep(搜索过滤)

1.命令格式：

　　　　grep [option] pattern file

2.命令参数：

-a 不要忽略二进制的数据

-A<显示行数>          除了显示符合范本样式的那一行之外，并显示该行之后的内容    grep -A 5 可以显示匹配内容以及后面的5行内容

-b                          在显示符合样式的那一行之前，标示出该行第一个字符的编号

-B 显示行数             除了显示符合样式的那一行之外，并显示该行之前的内容   grep -B 5 可以显示匹配内容以及前面的5行内容

-c   　　　　　　　  计算符合样式的行数

-C<显示行数>          除了显示符合样式的那一行之外，并显示该行之前后的内容  grep -C 5 可以显示匹配内容以及前后面的5行内容

-d <动作> 　　　　  当指定要查找的是目录而非文件时，必须使用这项参数，否则grep指令将回报信息并停止动作

-e<范本样式>       　指定字符串做为查找文件内容的样式

-E  　　　　　　　　将样式为延伸的普通表示法来使用。

-f<规则文件>           指定规则文件，其内容含有一个或多个规则样式，让grep查找符合规则条件的文件内容，格式为每行一个规则样式

-F　　　　　　　　   #将样式视为固定字符串的列表

-G  　　　　　　　　将样式视为普通的表示法来使用

-h   　　　　　　　　#在显示符合样式的那一行之前，不标示该行所属的文件名称。

-H   　　　　　　　　#在显示符合样式的那一行之前，表示该行所属的文件名称。

-i  　　　　　　　　  #忽略字符大小写的差别。

-l   　　　　　　　　 #列出文件内容符合指定的样式的文件名称。

-L   　　　　　　　　#列出文件内容不符合指定的样式的文件名称。

-n  　　　　　　　　 #在显示符合样式的那一行之前，标示出该行的行数编号。

-q   　　　　　　　   #不显示任何信息。

-r   　　　　　　　　#此参数的效果和指定“-d recurse”参数相同。

-s  　　　　　　　　 #不显示错误信息。

-v   　　　　　　　　#显示不包含匹配文本的所有行。

-V   　　　　　　　　#显示版本信息。

-w   　　　　　　　　#只显示全字符合的列。

-x   　　　　　　　　#只显示全列符合的列。

-y  　　　　　　　　 #此参数的效果和指定“-i”参数相同

3.grep的正则表达式:

^  #锚定行的开始

$  #锚定行的结束

.  #匹配一个非换行符的字符

*  #匹配零个或多个先前字符

.*   #一起用代表任意字符

[]   #匹配一个指定范围内的字符

[^]  #匹配一个不在指定范围内的字符

\(..\)  #标记匹配字符

\<      #锚定单词的开始

\>      #锚定单词的结束

x\{m\}  #重复字符x，m次

x\{m,\}  #重复字符x,至少m次

x\{m,n\}  #重复字符x，至少m次，不多于n次

\w    #匹配字母和数字字符

\W    #\w的反置形式，匹配一个或多个非单词字符

\b    #单词锁定符

[:alnum:]    #文字数字字符

[:alpha:]    #文字字符

[:digit:]    #数字字符

[:graph:]    #非空字符（非空格、控制字符）

[:lower:]    #小写字符

[:cntrl:]    #控制字符

[:print:]    #非空字符（包括空格）

[:punct:]    #标点符号

[:space:]    #所有空白字符（新行，空格，制表符）

[:upper:]    #大写字符

[:xdigit:]   #十六进制数字（0-9，a-f，A-F）

4. 扩展正则表达式  egrep 是 grep -E 的别名

＋， 于 . * 作用类似，表示 一个或多个重复字符。 
?， 于 . * 作用类似，表示0个或一个字符。 
｜，表示或关系，比如 'gd|good|dog' 表示有gd,good或dog的串 
（），将部分内容合成一个单元组。 比如 要搜索 glad 或 good 可以这样 'g(la|oo)d'

eg:

查找指定进程： ps -ef|grep svn

查找指定进程个数： ps -ef|grep svn -c

搜索有the的行,并输出行号  grep -n 'the' regular_express.txt

从文件中读取关键词进行搜索： 输出test.txt文件中含有从test2.txt文件中读取出的关键词的内容行   cat test.txt | grep -f test2.txt

从文件中读取关键词进行搜索 且显示行号： cat test.txt | grep -nf test2.txt

从文件中查找关键词: grep 'linux' test.txt    grep -n 'linux' test.txt 显示行号

从多个文件中查找关键词： grep 'linux' test.txt test2.txt

grep不显示本身进程： ps aux|grep ssh     ps aux | grep ssh | grep -v "grep"

找出已u开头的行内容:  cat test.txt | grep ^u

输出非u开头的行内容: cat test.txt |grep ^[^u]

输出ip地址:  ifconfig eth0 | grep -E "([0-9]{1,3}\.){3}[0-9]"

显示包含ed或者at字符的内容行: cat test.txt |grep -E "ed|at"

显示当前目录下面以.txt 结尾的文件中的所有包含每个字符串至少有7个连续小写字符的字符串的行:  grep '[a-z]\{7\}'  *.txt   或  grep -E '[a-z]{7}'  Test.txt

日志文件过大，不好查看，我们要从中查看自己想要的内容，或者得到同一类数据，比如说没有404日志信息的：grep '.' access1.log | grep -Ev '404' > access2.log

grep '.' access1.log|grep -Ev '404' > access2.log

grep '.' access1.log|grep -Ev '(404|/photo/|/css/)' > access2.log

grep '.' access1.log|grep -E '404' > access2.log

上面3句命令前面两句是在当前目录下对access1.log文件进行查找，找到那些不包含404的行，把它们放到access2.log中,后面去掉’v’,即是把有404的行放入access2.log

awk 匹配数字不能用\d