[shell基础]——sed命令

关于sed

sed 是一种在线编辑器，它一次处理一行内容。
处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。
sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。

---

sed详解

sed  [选项]  sed编辑命令  输入文件
shell 命令 |  sed  [选项]   sed编辑命令
sed  [选项]  -f  sed脚本文件  输入文件

常见的sed选项
-n  只显示匹配处理的行
-i    直接在文件中修改而不显示
-r   支持扩展正则表达式
-e  执行多个编辑命令时（一般用；代替）

常见的sed编辑命令
p：打印匹配行 print
d：删除指定行 delete
a：在匹配行后面追加 append
i：在匹配行前面插入 insert
c：整行替换
r：将文件的内容读入 read
w：将文本写入文件 write
s：字符串替换（匹配正则表达式）substitution

(1) '/  /p' = ！

显示x到y行
# sed -n 'x,yp'

x到y行不打印
# sed -n 'x,y!p' !取反

显示x到x+y行
# sed -n 'x,+yp'

显示第1行
# sed -n '1p'

显示最后1行
# sed -n '$p'

显示以0-9数字开头的行
# sed -n '/^[0-9]/p'
# sed -n '/正则表达式/{x,yp}'

输出匹配行并显示其在文本中的行号
# sed -n '/正则表达式/{=;p}'

(2) '/ /d'
# sed -n 'x,yd'
# sed -n '/正则表达式/{x,yd}'

删除所有空白行
# sed '/^$/d'

(3)  ; 或 -e
删除空行和#号开头的行
# sed '/^$/d ; /^#/d'
# sed -e '/^$/d' -e '/^#/d'   多条件删除是用'；'

(4) '/  /a\ ' 行后追加       '/  /a' 下一行追加
把三个***号加到Fred开头的行后面
# cat gongdatext.txt | sed '/^Fred/a\***'

在第n行的下一行追加一行内容（注意n不能是文本不存在的行数）
# seq 'na 111111111'

在匹配的行的下一行追加一行内容（注意是另起一行追加）
# seq '/正则表达式/a 111111111'

(5) '/   /i' 行前追加
在第n行的上一行追加一行内容
# seq 'ni 111111111'

在最后一行的上一行追加一行内容
# seq '$i 111111111'

在匹配的行的上一行追加一行内容
# seq '/正则表达式/i 111111111'

(6) '/  /c' 整行替换
将第n行整行的内容替换为该内容
# seq 'nc 111111111'

将匹配行内容替换为该内容
# seq '/正则表达式/c 111111111'

(7) 's/old/new/g' 替换
同时将# @替换成gongda
# cat gongda.txt | sed -e 's/#/gongda/g' -e 's/@/gongda/g'

同时将1,2行的abcdefg替换alvin
# cat gongda.txt | sed -n '1,2s/abcdefg/alvin/p'

(8) -i 将修改写入原文件

(9) r
在test.txt文件的末尾后面读入/etc/hosts文件的内容
# sed '$r /etc/hosts' test.txt

在/dev/sda1后面读入/etc/mtab文件的内容
# df -h | sed '/dev\/sda1/r /etc/mtab'

---

sed练习题

测试文本为gongdatext.txt，内容如下：

1    Steve Blenheim:238-923-7366:95 Latham Lane, Easton, PA 83755:11/12/56:20300
     2    Betty Boop:245-836-8357:635 Cutesy Lane, Hollywood, CA 91464:6/23/23:14500
     3    Igor Chevsky:385-375-8395:3567 Populus Place, Caldwell, NJ 23875:6/18/68:23400
     4    Norma Corder:397-857-2735:74 Pine Street, Dearborn, MI 23874:3/28/45:245700
     5    Jennifer Cowan:548-834-2348:583 Laurel Ave., Kingsville, TX 83745:10/1/35:58900
     6    Jon's DeLoach:408-253-3122:123 Park St., San Jose, CA 04086:7/25/53:85100
     7    Karen Evich:284-758-2857:23 Edgecliff Place, Lincoln, NB 92086:7/25/53:85100
     8    Karen Evich:284-758-2867:23 Edgecliff Place, Lincoln, NB 92743:11/3/35:58200
     9    Karen Evich:284-758-2867:23 November-December Edgecliff Place, Lincoln, NB 92743:11/3/35:58200
    10    "Fred" Fardbarkle:674-843-1385:20 Parak Lane, DeLuth, MN 23850:4/12/23:780900
    11    Fred Fardbarkle:674-843-1385:20 Parak Lane, DeLuth, MN 23850:4/12/23:780900
    12    Lori Gortz:327-832-5728:3465 Mirlo Street, Peabody, MA 34756:10/2/65:35200
    13    Paco Gutierrez:835-365-1284:454 Easy Street, Decatur, IL 75732:2/28/53:123500
    14    Ephram Hardy:293-259-5395:235 CarltonLane, Joliet, IL 73858:8/12/20:56700
    15    James Ikeda:834-938-8376:23445 Aster Ave., Allentown, NJ 83745:12/1/38:45000
    16    Barbara Kertz:385-573-8326:832 Ponce Drive, Gary, IN 83756:12/1/46:268500
    17    Lesley Kirstin:408-456-1234:4 Harvard Square, Boston, MA 02133:4/22/62:52600
    18    William Kopf:846-836-2837:6937 Ware Road, Milton, PA 93756:9/21/46:43500
    19    Sir Lancelot:837-835-8257:474 Camelot Boulevard, Bath, WY 28356:5/13/69:24500
    20    Jesse Neal:408-233-8971:45 Rose Terrace, San Francisco, CA 92303:2/3/36:25000
    21    Zippy Pinhead:834-823-8319:2356 Bizarro Ave., Farmount, IL 84357:1/1/67:89500
    22    Arthur Putie:923-835-8745:23 Wimp Lane, Kensington, DL 38758:8/31/69:126000
    23    Popeye Sailor:156-454-3322:945 Bluto Street, Anywhere, USA 29358:3/19/35:22350
    24    Jose Santiago:385-898-8357:38 Fife Way, Abilene, TX 39673:1/5/58:95600
    25    Tommy Savage:408-724-0140:1222 Oxbow Court, Sunnyvale, CA 94087:5/19/66:34200
    26    Yukio Takeshida:387-827-1095:13 Uno Lane, Ashville, NC 23556:7/1/29:57000
    27    Vinh Tranh:438-910-7449:8235 Maple Street, Wilmington, VM 29085:9/23/63:68900

(1)把Jon's 临时替换成Jonathan.
# sed "s/Jon's/Jonathan/g" gongdatext.txt

(2)把"Fred" 全部替换成gongda，其中包括了""号一起替换
# sed 's/"Fred"/gongda/g' gongdatext.txt

(3)删除头三行和第11行
# cat gongdatext.txt | sed  -e '1,3d' -e '11d'

(4)显示5-10行
# sed -n '5,10p' gongdatext.txt

(5)显示关键字November-December的行号
# sed -n -e '/November-December/=' gongdatext.txt
9

(6)把三个***号加到Fred开头的行后面
# sed -n -e '/^Fred/p' -e '/^Fred/a\***' gongdatext.txt

(7)过滤包含Jose的行，然后用He Xi Gong 'da' 替换Jose.
# sed -n  "s/Jose/He Xi gong 'da'/p"  gongdatext.txt
Jon's DeLoach:408-253-3122:123 Park St., San He Xi gong 'da', CA 04086:7/25/53:85100
He Xi gong 'da' Santiago:385-898-8357:38 Fife Way, Abilene, TX 39673:1/5/58:95600

(8)把Popeye的生日改为11/14/46
# sed '23s/3\/19\/35/11\/14\/46/g' gongdatext.txt

(9)删除所有空白行
# sed  '/^$/d' gongdatext.txt

(10)将里面包含关键字/全部替换成-
# sed 's/\//-/g' gongdatext.txt

(11)请将电话号码如：238-923-8366 中的- 替换为空
# sed 's/-/ /g' gongdatext.txt