Linux三剑客之sed

sed

sed对文本的处理很强大，并且sed非常小，参数少，容易掌握，他的操作方式根awk有点像。sed按顺序逐行读取文件。然后，它执行为该行指定的所有操作，并在完成请求的修改之后的内容显示出来，也可以存放到文件中。完成了一行上的所有操作之后，它读取文件的下一行，然后重复该过程直到它完成该文件。在这里要注意一点，源文件（默认地）保持不被修改。sed 默认读取整个文件并对其中的每一行进行修改。说白了就是一行一行的操作。我用sed主要就是用里面的替换功能，真的很强大。下面以实例，详细的说一下，先从替换开始，最常用的。

参数：

 sed -h
  -n, --quiet, --silent    取消自动打印模式空间
  -e 脚本, --expression=脚本   添加“脚本”到程序的运行列表
  -f 脚本文件, --file=脚本文件  添加“脚本文件”到程序的运行列表
  --follow-symlinks    直接修改文件时跟随软链接
  -i[扩展名], --in-place[=扩展名]    直接修改文件(如果指定扩展名就备份文件)
  -l N, --line-length=N   指定“l”命令的换行期望长度
  --posix  关闭所有 GNU 扩展
  -r, --regexp-extended  在脚本中使用扩展正则表达式
  -s, --separate  将输入文件视为各个独立的文件而不是一个长的连续输入
  -u, --unbuffered  从输入文件读取最少的数据，更频繁的刷新输出
  --help     打印帮助并退出
  --version  输出版本信息并退出

实例练习：

测试文件如：

 root:x:::root:/root:/bin/bash
 bin:x:::bin:/bin:/bin/false
 daemon:x:::daemon:/sbin:/bin/false
 mail:x:::mail:/var/spool/mail:/bin/false
 ftp:x:::ftp:/home/ftp:/bin/false
 &nobody:$:::nobody:/:/bin/false
 zhangy:x:::,,,:/home/zhangy:/bin/bash
 http:x::::/srv/http:/bin/false
 dbus:x:::System message bus:/:/bin/false
 hal:x:::HAL daemon:/:/bin/false
 mysql:x::::/var/lib/mysql:/bin/false
 aaa:x::::/home/aaa:/bin/bash
 ba:x::::/home/zhangy:/bin/bash
 test:x::::/home/test:/bin/bash
 @zhangying:*::::/home/test:/bin/bash
 policykit:x:::Po

一：把test文件中的root替换成tankzhang

 # sed 's/root/tankzhang/' test

二：用tankzhang把文件test中的root全部替换掉，请注意g这个字母

 # sed 's/root/tankzhang/g' test |grep zhang
  tankzhang:x:::tankzhang:/tankzhang:/bin/bash
  zhangy:x:::,,,:/home/zhangy:/bin/bash
  ba:x::::/home/zhangy:/bin/bash
  @zhangying:*::::/home/test:/bin/bash

三：加了-n p后表示只打印那些发生替换的行（部分替换），上面的例子，我并没有加上grep

 # sed -n 's/root/tankzhang/p' test
  tankzhang:x:::root:/root:/bin/bash

四：,在第二行，到第八行之间，替换以zhang开头的行，用ying来替换，并显示替换的行

 # cat test | sed -ne '2,8s/^zhang/ying/gp'
  yingy:x:::,,,:/home/zhangy:/bin/bash

五：当有多个命令要执行时，可以用分号来分开，并且分隔符可以自定义，默认是／。上面的例子意思是在第二行，到第八行之间，替换以zhang开头的行，用ying来替换，在5，到10间，用goodbay来替换dbus，并显示替换的行

 # cat test | sed -n  '2,8s/^zhang/ying/gp;5,10s#dbus#goodbay#gp'
  yingy:x:::,,,:/home/zhangy:/bin/bash
  goodbay:x:::System message bus:/:/bin/false

六：,行替换，用匹配root的行，来替换匹配zhangy的行

 $ sed -e '/root/h' -e '/zhangy/g' test
  root:x:::root:/root:/bin/bash
  bin:x:::bin:/bin:/bin/false
  daemon:x:::daemon:/sbin:/bin/false
  mail:x:::mail:/var/spool/mail:/bin/false
  ftp:x:::ftp:/home/ftp:/bin/false
  &nobody:$:::nobody:/:/bin/false
  root:x:::root:/root:/bin/bash
  http:x::::/srv/http:/bin/false
  dbus:x:::System message bus:/:/bin/false
  hal:x:::HAL daemon:/:/bin/false
  mysql:x::::/var/lib/mysql:/bin/false
  aaa:x::::/home/aaa:/bin/bash
  root:x:::root:/root:/bin/bash
  test:x::::/home/test:/bin/bash
  root:x:::root:/root:/bin/bash

注意：特殊匹配

 匹配数字别忘了中括号外面还有一个中括号。
 [:alnum:] 字母数字 [a-z A-Z -]
 [:alpha:] 字母 [a-z A-Z]
 [:blank:] 空格或制表键
 [:cntrl:] 任何控制字符
 [:digit:] 数字 [-]
 [:graph:] 任何可视字符（无空格）
 [:lower:] 小写 [a-z]
 [:print:] 非控制字符
 [:punct:] 标点字符
 [:space:] 空格
 [:upper:] 大写 [A-Z]
 [:xdigit:] 十六进制数字 [- a-f A-F]

例a,删除1，14行

 $ sed -e '1,14d' test
  @zhangying:*::::/home/test:/bin/bash
  policykit:x:::Po

例b,删除4以后的行，包括第4行，把$当成最大行数就行了。

 $ sed -e '4,$d' test
  root:x:::root:/root:/bin/bash
  bin:x:::bin:/bin:/bin/false
  daemon:x:::daemon:/sbin:/bin/false

例c,删除包括false的行，或者包括bash的行，别忘了加\

 $ sed -e '/\(false\|bash\)$/d' test
  policykit:x:::Po

例d,删除从匹配root的行，到匹配以test开头的行，中间的行

 $ sed -e '/root/,/^test/d' test
  @zhangying:*::::/home/test:/bin/bash
  policykit:x:::Po