Shell-4-让文本飞

1.正则表达式

^	行起始标志
$	行尾标记
.	匹配任意一个字符
[ ]	匹配包含在[字符]之中的任意一个字符，coo[kl]匹配cook或cool
[^]	匹配除[^字符]的任意一个字符
[-]	匹配[]中范围内任意一个字符
?	匹配之前的项一次或0次
+	匹配之前的项一次或多次
*	匹配之前的项0次或多次
()	创建一个用于匹配的子串
{n}	匹配之前的项n次
{n,m}	指定之前的项所必须匹配的最小次数和最大次数
|	交替-匹配|两边的任意一项
\	转义符可以将上面的符号转义

2.grep

（1）搜索包含特定模式的文本行

[root@cai tmp]# cat .txt
this is a test2

[root@cai tmp]# grep  .txt 

也可以对多个文件进行搜索:grep  .txt .txt .txt
使用正则表达式必须使用egrep

（2）要打印除某行之外所有行

[root@cai tmp]# grep -v  .txt
this is a test2

（3）统计文本或文本中包含匹配字符串的行数

[root@cai tmp]# grep -c  .txt

（4）打印包含匹配字符串的行数

[root@cai tmp]# grep  -n .txt
:

（5）搜索多个文件并找出匹配文本位于哪个文件中

[root@cai tmp]# grep -l  .txt .txt
.txt
.txt

（6）如果进行递归查询，可以使用

grep “text” . -R -n

（7）忽视样式中的大小写（grep -i pattern file）

（8）用grep匹配多个样式

grep -e “pattern1” -e “pattern2”

（9）在grep搜索中指定或排除文件

grep “main()” . -r --exclude “readne”

（10）打印出匹配文本之前或之后的行

要打印匹配某个结果之后的3行，可以使用-A选项

[root@cai tmp]# seq |grep  -A 

要打印匹配某个结果之前的3行，可以使用-B选项

[root@cai tmp]# seq |grep  -B 

要打印匹配某个结果之前以及之后的3行，使用-C选项
[root@cai tmp]# seq |grep  -C 

3.用cut按列切分文本

cut -f , filename

4.sed

（）sed可以替换给定文本中的字符串
  sed ‘s/pattern/replace_string’ file
（）在默认情况下，sed只会打印替换后的文本，要想保留同时更改，用-i选项
sed -i ‘s/pattern/replace_string’ file
（）如果想替换所有内容，在结尾加上参数g
sed ‘s/pattern/replace_string/g’ file
（）移除空白行
sed ‘ /^$/d’ file
（）直接在文件中进行替换
sed ‘s/PATTERN/replacement’ -i filename\
（）组合多个表达式
sed ‘expression’ | sed ‘expression’
=sed ‘expression;expression’
=sed -e ‘expression’ -e ‘expression’

5.awk

脚本基本结构如下所示：
awk ‘BEGIN{ print “start” } pattern {commands} END{print “end” } ’ file
awk ‘BEGIN {statements} {statements} END { end statements}’

6.统计特定文件中的词频

#!/bin/bash
#用途：计算文件中单词的词频

if [ $# -ne  ];
then
  echo "usage:$0 filename";
  exit -
fi

filename=$

egrep -o "\b[[:alpha:]]+\b" $filename | \

awk '{ count[$0]++ }
END{ printf("%-14s%s\n","word","count");
for(ind in count)
{ printf("%-14s%d\n",ind,count[ind]) ; }
}'
~
 [root@cai shell]# sh word_freq.sh /tmp/.txt
word          count
a
this
is            

7.按列合并多个文件（paste）

[root@cai tmp]# paste .txt .txt
this is a test2    cairui
    xijinpng
    aiyinsitan

8.打印文件或行中的第n个单词或列

下面打印第5列
awk ‘{ print $ }’ filename

9.打印行或样式之间的文本

（1）[root@cai tmp]# seq 100|awk 'NR==4,NR==8'

（2）4awk ‘NR==M,NR==N’ filename

5

6

7

8