linux之sed的常用操作

Sed命令:

　　sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出或者加上 -i 参数(此时处理结果不会发送值屏幕).

sed 命令格式

　　sed [options] 'command' file

　　sed [options] -f scriptfile file

sed 用法实例

1.匹配模式的其它正则用法

sed-n '/r*t/p'/etc/passwd#打印匹配r有0个或者多个，后接一个t字符的行

sed -n '/.*r.*/p'/etc/passwd#打印匹配有r的行并且r后面跟任意字符
sed -n '/^r.*/p'/etc/passwd#打印匹配以r开头的行并且r后面跟任意字符
sed -n '/r$/p' /etc/passwd#打印匹配以结尾的

sed -n '/o*/p'/etc/passwd#打印o字符重复任意次(含0)，并没什么意义
sed -n '/o\{4\}/p'/etc/passwd#打印o字重复出现4次

sed -n '/o\{1,\}/p'/etc/passwd#打印o字重复出现一次以上

sed -n '/o\{1,3\}/p'/etc/passwd#打印o字重复出现一次到三次之间以上

2.替换操作: s命令

 root@localhost:/home/wee/Desktop/linux#>cat 

 root@localhost:/home/wee/Desktop/linux#>sed 's/11/newline1/'
 newline1

 root@localhost:/home/wee/Desktop/linux#>cat 

 root@localhost:/home/wee/Desktop/linux#>sed -i 's/11/newline1/'
 root@localhost:/home/wee/Desktop/linux#>cat
 newline1

想要替换每一行中的所有匹配，在最后加g,如果想从第N次匹处开始替换所有使用Ng，只替换第N处使用N

 wee@localhost:~/Desktop/linux$>cat 

 wee@localhost:~/Desktop/linux$>sed 's/11/secondmatch/'
 secondmatch  

 wee@localhost:~/Desktop/linux$>sed 's/11/secondmatch/2'
  secondmatch 

 wee@localhost:~/Desktop/linux$>sed 's/11/secondmatch/3'
   secondmatch

 wee@localhost:~/Desktop/linux$>sed 's/11/secondmatch/2g'
  secondmatch secondmatch

 wee@localhost:~/Desktop/linux$>sed 's/11/secondmatch/g'
 secondmatch secondmatch secondmatch

如上只是把替换结果输出到了屏幕文件内容并未变化，如果要文件保存更改使用 -i

wee@localhost:~/Desktop/linux$>sed -i 's/11/newline/g'
wee@localhost:~/Desktop/linux$>cat
newline newline newline 

上述命令中字符"/ "在sed中作为定界符使用，也可以使用其它的定界符（":" "|"等）

 wee@localhost:~/Desktop/linux$>sed 's:11:secondmatch:g'
 secondmatch secondmatch secondmatch

 wee@localhost:~/Desktop/linux$>sed 's|11|secondmatch|g'
 secondmatch secondmatch secondmatch

定界符出现在样式内部时，需要进行转义，否则报错

 wee@localhost:~/Desktop/linux$>cat
 root:x:::root:/root:/bin/bash
 bin:x:::bin:/bin:/sbin/nologin
 daemon:x:::daemon:/sbin:/sbin/nologin
 adm:x:::adm:/var/adm:/sbin/nologin
 lp:x:::lp:/var/spool/lpd:/sbin/nologin
 sync:x:::sync:/sbin:/bin/sync
 shutdown:x:::shutdown:/sbin:/sbin/shutdown
 halt:x:::halt:/sbin:/sbin/halt
 mail:x:::mail:/var/spool/mail:/sbin/nologin
 uucp:x:::uucp:/var/spool/uucp:/sbin/nologin
 wee@localhost:~/Desktop/linux$>sed 's:/:\:g'
 sed: -e expression #1, char 7: unterminated `s' command

 wee@localhost:~/Desktop/linux$>sed 's:\/:r:g'
 root:x:::root:rroot:rbinrbash
 bin:x:::bin:rbin:rsbinrnologin
 daemon:x:::daemon:rsbin:rsbinrnologin
 adm:x:::adm:rvarradm:rsbinrnologin
 lp:x:::lp:rvarrspoolrlpd:rsbinrnologin
 sync:x:::sync:rsbin:rbinrsync
 shutdown:x:::shutdown:rsbin:rsbinrshutdown
 halt:x:::halt:rsbin:rsbinrhalt
 mail:x:::mail:rvarrspoolrmail:rsbinrnologin

有些时候一个文件中可能有大部分没有用的内容，我们只想提取或者替换有限行我们可以使用 -n和p的结合

 wee@localhost:~/Desktop/linux$>cat
 no usey
 no use
 no use
 useful
 no use
 no usey
 no use
 no use
 useful
 no use
 useful
 useful
 wee@localhost:~/Desktop/linux$>sed -n '/useful/p'
 useful
 useful
 useful
 useful
 wee@localhost:~/Desktop/linux$>sed -n 's/useful/userfulline/p'
 userfulline
 userfulline
 userfulline
 userfulline
 wee@localhost:~/Desktop/linux$>sed -i -n 's/useful/userfulline/p'
 wee@localhost:~/Desktop/linux$>cat
 userfulline
 userfulline
 userfulline
 userfulline

有可能不想对文件进行任何替换操作，只想知道匹配某一字符串的行都在第几行，怎么办？使用 -n和=

 wee@localhost:~/Desktop/linux$>cat 

 wee@localhost:~/Desktop/linux$>sed -n '/22/='
 

打印指定行和行号(=和p用分号隔开)

 wee@localhost:~/Desktop/linux$>sed -n '1,4{=;p}' 

 root:x:::root:/root:/bin/bash

 bin:x:::bin:/bin:/sbin/nologin

 daemon:x:::daemon:/sbin:/sbin/nologin

 adm:x:::adm:/var/adm:/sbin/nologin

保留打印文件前N行，使用Nq

 wee@localhost:~/Desktop/linux$>sed '2q' 

 wee@localhost:~/Desktop/linux$>sed '3q' 

从匹配行处打印到第N行，使用-n /pattern/,Np

wee@localhost:~/Desktop/linux$>cat
root:x:::root:/root:/bin/bash
bin:x:::bin:/bin:/sbin/nologin
daemon:x:::daemon:/sbin:/sbin/nologin
adm:x:::adm:/var/adm:/sbin/nologin
lp:x:::lp:/var/spool/lpd:/sbin/nologin
sync:x:::sync:/sbin:/bin/sync
shutdown:x:::shutdown:/sbin:/sbin/shutdown
halt:x:::halt:/sbin:/sbin/halt
mail:x:::mail:/var/spool/mail:/sbin/nologin
uucp:x:::uucp:/var/spool/uucp:/sbin/nologin
wee@localhost:~/Desktop/linux$>sed -n '/halt/,10p'
halt:x:::halt:/sbin:/sbin/halt
mail:x:::mail:/var/spool/mail:/sbin/nologin
uucp:x:::uucp:/var/spool/uucp:/sbin/nologin

从第N行处开始打印到匹配行处(第一次匹配)

 wee@localhost:~/Desktop/linux$>sed -n '1,/33/p' 

打印两次匹配之间所有行

 wee@localhost:~/Desktop/linux$>cat
 aa
 bb
 cc
 dd
 wee@localhost:~/Desktop/linux$>sed -n '/aa/,/cc/p'
 aa
 bb
 cc

打印匹配a有0个或者多个，后接一个t字符的行

 wee@localhost:~/Desktop/linux$>cat
 aamofsdntt
 bb
 cc
 dd

 wee@localhost:~/Desktop/linux$>sed -n '/a*t/p'
 aamofsdntt

 #引用http://www.tuicool.com/articles/3qa67v 的内容

 [root@jie1 ~]# sed -i '/DEVICE/c\Ethernet' test #匹配DEVICE的行，替换成Ethernet这行
 [root@jie1 ~]# sed -i 's/static/dhcp/' test     #把static替换成dhcp(/,@,#都是前面所说的地址定界符)
 [root@jie1 ~]# sed -i '/IPADDR/s@22\.1@10.12@' test #匹配IPADDR的行，把22.1替换成10.12由于.号有特殊意义所有需要转义
 [root@jie1 ~]# sed -i '/connect/s#YES#NO#' test #匹配connect的行，把YES替换成NO
 [root@jie1 ~]# sed -i 's/bin/tom/2g' test       #把所有匹配到bin的行中第二次及第二次之后出现bin替换成tom
 [root@jie1 ~]# sed -i 's/daemon/jerry/2p' test  #把所有匹配到bin的行中第二次出现的daemon替换成jerry，并在生产与匹配行同样的行
 [root@jie1 ~]# sed -i 's/adm/boss/2' test       #把所有匹配到adm的行中仅仅只是第二次出现的adm替换成boss
 [root@jie1 ~]# sed -i '/root/{s/bash/nologin/;s/0/1/g}' test#匹配root的行，把bash替换成nologin，且把0替换成1
 [root@jie1 ~]# sed -i 's/root/(&)/g' test                 #把root用括号括起来，&表示引用前面匹配的字符
 [root@jie1 ~]# sed -i 's/BOOTPROTO/#BOOTPROTO/' test      #匹配BOOTPROTO替换成#BOOTPROTO，在配置文件中一般用于注释某行
 [root@jie1 ~]# sed -i 's/ONBOOT/#&/' test                 #匹配ONBOOT的行的前面添加#号，在配置文件中也表示注释某行
 [root@jie1 ~]# sed -i '/ONBOOT/s/#//' test                #匹配ONBOOT的行，把#替换成空，即去掉#号，也一般用作去掉#注释

3.删除操作: d命令

1.删除以某个字符开头的行

 wee@pc~$cat
 #

 #

 wee@pc~$sed '/^#/d' 

2.删除命令"d"前加"!"表示取反，例子为删除以非"#"开头的行。。。

 wee@pc~$sed '/^#/!d'
 #
 #

3.删除第N行

 wee@pc~$cat
 #

 #

 wee@pc~$sed '/2/d'
 #
 #

4.删除最后一行

 wee@pc~$sed '$d'
 #

 #

5.从第n行删到第m行

 wee@pc~$sed '1,5d' 

6.删除匹配字符串的行

 wee@pc~$sed '/3/d'
 #

 wee@pc~$sed '/3/!d'
 #
 wee@pc~$

7.同时定义多个条件用 "-e"

 wee@pc~$cat
 #

 #

 wee@pc~$sed -e '/11/d' -e '/44/d' 

 #

 wee@pc~$

4.行插入操作（a:行后插入i:行前插入)

 [root@VM_41_84_centos ~]# sed '/22/a\insert line'
 #

 insert line
 #

 [root@VM_41_84_centos ~]# sed '/22/i\insert line'
 #
 insert line

 #