grep 和 sed:linux经常使用工具 & 基本正則表達式
grep 见链接:http://www.cyberciti.biz/faq/grep-regular-expressions/
sed參考文章:http://www.thegeekstuff.com
sed工作原理
This is called as one execution cycle. Cycle continues till end of file/input is reached:
1. Read a entire line from stdin/file.
2. Removes any trailing newline.
3. Places the line, in its pattern buffer.
4. Modify the pattern buffer according to the supplied commands.
5. Print the pattern buffer to stdout.
sed使用语法:
sed [-nefri] [命令]
描写叙述:
-n
:使用安静(silent)模式。在一般 sed 的使用方法中,全部来自 STDIN 的数据一般都会被列出到终端上。
但假设加上 -n 參数后。则仅仅有经过sed 特殊处理的那一行(或者动作)才会被列出来。
-e
:直接在命令列模式上进行 sed 的动作编辑。
-f
:直接将 sed 的动作写在一个文件内。 -f filename 则能够运行 filename 内的 sed 动作。
-r
:sed 的动作支持的是延伸型正规表示法的语法。(默认是基础正规表示法语法)
-i
:直接改动读取的文件内容。而不是输出到终端。
匹配的的格式(行号,模式字符串):
ADDRESS(行号):
n
: 匹配第几行
m,n
: 从m到n行
m~n
:从m行開始。每隔n行
'$'
: 最后一行
PATTERN(字符串):
/sometext/
: 匹配有sometext字符串的行
sed -n 'ADDRESS'p filename // print, e.g: sed -n '4'p text.txt。
'ADDRESSp',即将p放在单引號中也是能够的。或者将单引號换成双引號"ADDRESSp"也是一样,下同。
sed -n '/PATTERN/p' filename // e.g: sed -n '/aa/p' text.txt
sed -n 'ADDRESS'd filename //delete,不会删除文件里的内容。仅仅是在标准输出中删除该行。
sed -n '/PATTERN/d' filename
sed 'ADDRESS a\
some text' filename //append,在匹配行的下一行加入"some text",注意单引號
sed '/PATTERN/ a\
some text' filename
sed 'ADDRESS i\
some text' filename // insert,在匹配行前插入一行
sed '/PATTERN/ i\
some text' filename
sed 'ADDRESS c\
some text' filename // 替换匹配行
sed 'PATTERN c\
some text' filename
sed -n 'ADDRESS'= filename //打印匹配的行号, 仅仅接受一个地址,假设打印多行使用{}括起来,例如以下
sed -n 'ADDRESS,/PATTERN/ {
=
p
}' filename
运行多条sed命令
sed -e: use multiple -e
options to build up a script out of many parts。
-e
option is optional for sed with single command. sed will execute the each set of command while processing input from the pattern buffer
-e
script, --expression
=script
add the script to the commands to be executed
样例:
sed -e 's/foo/bar/' -e '/FOO/d'
解释:先用bar替换foo,然后再删除有字符串FOO的行
sed 正則表達式查找和替换:
's'
命令应该是sed中最重要的命令,语法例如以下:
sed 'ADDRESSs/REGEXP/REPLACEMENT/FLAGS' filename
sed 'PATTERNs/REGEXP/REPLACEMENT/FLAGS' filename
样例:
sed '1s/aa/bb/' text.txt //用bb替换aa。仅仅在aa第一次出现的地方进行替换
sed '2s/aa/bb/' text.txt //用bb替换aa,仅仅在aa第二次出现的地方进行替换
sed 's/aa/bb/g' text.txt //用bb替换aa。g(global )是全局替换的意思。不加g默认也是全局替换。
sed -n 's/aa/bb/gpw result.txt' text.txt //g全局替换,p打印,w将替换结果写到result.txt文件里
sed 's/...$//' text.txt //正則表達式匹配:将最后位置的前三个字符替换为空。即删除每行的最后三个字符。
基本正則表達式
. : 代表随意单个字符
演示样例: a.b : 表示acb/a*b/a b/a9b… 都能够但不能是accb/ab
[] : 指定范围内的单个字符
演示样例: a[c|d]b : 表示acb/adb 其它的都不能够
[^ ] : 取反。非指定范围内的单个字符
演示样例:a[^d]b : 表示除了adb 其它的acb/abb/a b…都能够
? : 反复前边的字符0次或1次
演示样例:a?b : 表示ab/aab 其它的都不能够
* : 反复前边的字符无限次
演示样例:a* : 表示a/aa/aaa/aaaa… 能够反复a无限次
.* : 随意长度的随意字符
演示样例:a.* : 表示a/ac/acc/a,b … 能够是a后边跟随意字符
\{m,n\} : 反复前边的字符至少m次,最多n次。必须加上反斜杠转义
演示样例:a{1,3} : 表示 a/aa/aaa 能够反复a最少1次最多3次
\{m,\} : 反复前边的字符至少m次,必须加上反斜杠转义
演示样例:a{2,} : 表示aa/aaa/aaaa… 能够反复a最少2次最多不限
\{0,n\} : 反复前边的字符最多n次,必须加上反斜杠转义
演示样例:a{0,3} : 表示 空/a/aa/aaa 能够反复a最多3次也能够不反复也就是空
\{m\} : 反复前边的字符精确匹配m次,必须加上反斜杠转义
演示样例:a{2} : 表示 aa 精确匹配反复a2次
^ : 行首匹配,必须出如今行首
演示样例:^a : 表示全部以a开头的行
$ : 行尾匹配。必须出如今行尾。注意词尾与行尾的差别
演示样例:a$ :表示全部以a结尾的行
^$ : 空白行
\< : 词首匹配。必须出如今词首
演示样例:\< a : 表示a/acv/abcc… 全部以a开头的单词
\> : 词尾匹配,必须出如今词尾,注意词尾与行尾的差别
演示样例:a> : 表示a/cda/cca/… 全部以a结尾的单词
\(\) : 分组字符,可用\1引用左数第一个(中包括的内容
演示样例: a\(abc\)\1 表示:aabcabc \1引用了()中的abc
[ :upper: ] : 单个随意大写字母,注意[]与:之间有个空格,下同
演示样例:a[:upper:] 表示:aA/aB/aC… a后边跟随意一个大些字母
[ :lower: ] : 单个随意小写字母
[ :space: ] : 单个空白字符
[^[ :space: ]] : 单个非空白字符
[ :digit: ] : 单个随意数字0-9
演示样例:a[:digit:]b 表示: a0b/a1b/a2b… a和b中间跟随意一个0-9的数字
[ :alpha: ] : 单个随意字母
[ :alnum: ] : 单个随意字母或数字
[:punct:] : 单个随意特殊符号
扩展正則表達式元字符:
扩展正則表達式简化了基本正则中的一个元字符。又添加了几个。
\{m,n\} → {m,n} : 使用方法与基本正则中的一样
演示样例:a{1,3} 表示: a/aa/aaa
\(\) → () : 使用方法与基本正则中的一样
演示样例:(abc)\1 表示:abcabc
+ : 匹配前边的字符一次或多次
演示样例:a+ 表示: a/aa/aaa/aaaa…
| 表示或
演示样例:(a|b)c 表示: ac/bc
grep 和 sed:linux经常使用工具 & 基本正則表達式的更多相关文章
- Linux正則表達式-定位元字符
有两个元字符用于指定字符串出如今行首或行末.脱字符(^)是指示開始的单字符正則表達式.美元符号($)是指示行结尾的单字符的正則表達式.这些通常称为"定位符",由于它们将匹配限定在特 ...
- 轻松学习之Linux教程六 正則表達式具体解释
本系列文章由@超人爱因斯坦出品.转载请注明出处. 作者:超人爱因斯坦 个人站点:http://www.hpw123.net 文章链接:http://hpw123.net/a/L ...
- shell文本过滤编程(一):grep和正則表達式
[版权声明:转载请保留出处:blog.csdn.net/gentleliu.Mail:shallnew at 163 dot com] Linux系统中有非常多文件,比方配置文件.日志文件.用户文件等 ...
- linux系统之shell编程-正則表達式
shell编程正則表達式: 1:元字符 [ ] . * ? + ( ) | { } ^ $ 2 : [a-z0-9] 表示匹配随意数字和字母的一个 3 : [^a-z] ...
- Linux正則表達式-反复出现的字符
星号(*)元字符表示它前面的正則表達式能够出现零次或多次.也就是说,假设它改动了单个字符.那么该字符能够在那里也能够不在那里,而且假设它在那里,那可能会不止出现一个.能够使用星号元字符匹配出如今引號中 ...
- 正则、grep、sed、awk
每次用到正则都要蛋疼一下,索性总结一下在这里. 正则 正則表達式主要分为基础正则和扩展正则.注意,正则和一般命令行输入的命令的通配符不同.正则仅仅使用于支持这样的表示法的工具,如:vi,grep,se ...
- 性能工具之linux三剑客awk、grep、sed详解
前言 linux 有很多工具可以做文本处理,例如:sort, cut, split, join, paste, comm, uniq, column, rev, tac, tr, nl, pr, he ...
- Linux 文本处理工具grep,sed,awk
grep.sed和awk都是文本处理工具,虽然都是文本处理工具单却都有各自的优缺点,一种文本处理命令是不能被另一个完全替换的,否则也不会出现三个文本处理命令了.只不过,相比较而言,sed和awk功能更 ...
- Linux文本三剑客超详细教程---grep、sed、awk
awk.grep.sed是linux操作文本的三大利器,合称文本三剑客,也是必须掌握的linux命令之一.三者的功能都是处理文本,但侧重点各不相同,其中属awk功能最强大,但也最复杂.grep更适合单 ...
随机推荐
- 有序线性搜索(Sorted/Ordered Linear Search)
如果数组元素已经排过序(升序),那我们搜索某个元素就不必遍历整个数组了.在下面给出的算法代码中,到任何一点,假设当前的arr[i]值大于搜索的值data,就可以停止搜索了. #include<s ...
- 用Python实现九九乘法表
1.用“#”组成的矩形的实现 代码 eight = int(input("Height:")) #用户输入高度 width = int(input("Width:&quo ...
- Stones(优先队列)
Stones Time Limit: 5000/3000 MS (Java/Others) Memory Limit: 65535/32768 K (Java/Others)Total Subm ...
- .NET 4 并行(多核)编程系列之一入门介绍
.NET 4 并行(多核)编程系列之一入门介绍 本系列文章将会对.NET 4中的并行编程技术(也称之为多核编程技术)以及应用作全面的介绍. 本篇文章的议题如下: 1. 并行编程和多线程编程的区别. ...
- JDK5新特性之线程同步集合(五)
一. 传统集合: 传统方式下的Collection在迭代集合时, 不同意对集合进行改动: public class CollectionModifyExceptionTest { public sta ...
- PHP流程控制中不经常使用的替代语法
准备做个wordpress的主题.结果看到了例如以下的语法: <div id="primary" class="content-area"> < ...
- 网页被Chrome识别成英语,区域,语言,网站
修改成这个后解决 <!DOCTYPE html> <html> <head> <meta http-equiv="Content-Type" ...
- JQ图片跟着鼠标走
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/ ...
- vs2010 中检测到有潜在危险的 Request.Form 值
解决方法 : 一般在网上搜只有以下两种处理方式: 1.在报错的页面前吧<%Page%>标签中增加validateRequest="false"的属性为false 如下所 ...
- G - Bullseye
Description A simple dartboard consists of a flat, circular piece of cork with concentric rings draw ...