linux sed 命令 实现对文件的增删改替换查 实验

1. 统一实验文本

# 创建包含下面内容的文件，后面的操作都会使用这个文件

[root@MongoDB ~]# cat person.txt
,mike,CEO
,jack,CTO
,yy,CFO
,feixue,CIO
,tom,COO

2. 增删改查

2.1 增

• a 追加文本到指定行后
• i 插入文本到指定行前

2a 追加到第二行后面

[root@MongoDB ~]# sed '2a 106,ben,CSO' person.txt
,mike,CEO
,jack,CTO
106,ben,CSO
,yy,CFO
,feixue,CIO
,tom,COO

2i 把内容 插入到第二行前面

[root@MongoDB ~]# sed '2i 106,ben,CSO' person.txt
,mike,CEO
106,ben,CSO
,jack,CTO
,yy,CFO
,feixue,CIO
,tom,COO

2.1.2 多行增加

\n 换行符 不加\n的话 都在一行显示

[root@MongoDB ~]# sed '2a 106,ben,CSO\n107,peter,CCO' person.txt
,mike,CEO
,jack,CTO
106,ben,CSO
107,peter,CCO
,yy,CFO
,feixue,CIO
,tom,COO

第二种方法：

后面加\ 接上输入文本内容

[root@MongoDB ~]# sed '2a 106,ben,CSO \
> ,peter,CCO' person.txt
,mike,CEO
,jack,CTO
106,ben,CSO
107,peter,CCO
,yy,CFO
,feixue,CIO
,tom,COO

企业案例1：优化SSH配置（一键完成增加若干参数）

在我们学习系统优化时，有一个优化点：更改ssh服务远程登录的配置。主要的操作是在ssh的配置文件加入下面5行文本

Port
PermitRootLogin no
PermitEmptyPasswords no
UseDNS no
GSSAPIAuthentication no

我们可以使用vi命令编辑这个文本，但这样就比较麻烦，现在想一条命令增加5行文本到第13行前？

[root@MongoDB ~]# sed  '13i Port 52113\nPermitRootLogin no\nPermitEmptyPasswords no\nUseDNS no\nGSSAPIAuthentication no' /etc/ssh/sshd_config 

2.2 删

d 删除指定的行

不指定行，就删除所有行，所以没有结果

[root@MongoDB ~]# sed 'd' person.txt

删除文本第二行

[root@MongoDB ~]# sed '2d' person.txt
,mike,CEO
,yy,CFO
,feixue,CIO
,tom,COO

把文本 第二行到第5行内容删掉

[root@MongoDB ~]# sed '2,5d' person.txt
,mike,CEO

把文本的 第二行以上到结尾的行都删掉

[root@MongoDB ~]# sed '2,$d' person.txt
,mike,CEO

删除文本第二行，第三行

[root@MongoDB ~]# sed '2,3d' person.txt
,mike,CEO
,feixue,CIO
,tom,COO

删除文本奇数行，留下偶数行

[root@MongoDB ~]# sed '1~2d' person.txt
,jack,CTO
,feixue,CIO

把文本 第二行到  2+2=4 第四行删掉  2-4 删掉

[root@MongoDB ~]# sed '2,+2d' person.txt
,mike,CEO
,tom,COO

匹配有jack字符串那行 删除掉

[root@MongoDB ~]# sed '/jack/d' person.txt
,mike,CEO
,yy,CFO
,feixue,CIO
,tom,COO

匹配有jack字符串和yy字符串的行 删除掉

[root@MongoDB ~]# sed '/jack/,/yy/d' person.txt
,mike,CEO
,feixue,CIO
,tom,COO

把有jack字符串的行，和第三行删掉

[root@MongoDB ~]# sed '/jack/,3d' person.txt
,mike,CEO
,feixue,CIO
,tom,COO

改

2.3.1 按行替换

c 用新行取代旧行

2c 把输入的文本 替换第二行文本

[root@MongoDB ~]# sed '2c 106,benson,CSO' person.txt
,mike,CEO
,benson,CSO
,yy,CFO
,feixue,CIO
,tom,COO

文本替换

s：单独使用→将每一行中第一处匹配的字符串进行替换 ==>sed命令 
g：每一行进行全部替换 ==>sed命令s的替换标志之一，非sed命令 
-i：修改文件内容 ==>sed软件的选项

sed软件替换模型(方框▇被替换成三角▲)

sed -i 's/▇/▲/g' test.log 
sed -i 's#▇#▲#g' test.log

s要和g配合使用

观察特点

1. 两边是引号，引号里面的两边分别为s和g，中间是三个一样的字符/或#作为定界符。#能在替换内容包含/有助于区别。定界符可以是任意符号如:或|等，但当替换内容包含定界符时，需转义即: |。经过长期实践，建议大家使用#作为定界符。
2. 定界符/或#，第一个和第二个之间的就是被替换的内容，第二个和第三个之间的就是替换后的内容。
3. s#▇#▲#g，▇能用正则表达式，但▲不能用，必须是具体的。
4. 默认sed软件是对模式空间(内存中的数据)操作，而-i选项会更改磁盘上的文件内容。

[root@MongoDB ~]# sed 's/jack/ben/g' person.txt
,mike,CEO
,ben,CTO
,yy,CFO
,feixue,CIO
,tom,COO

-i 修改文件内容

[root@MongoDB ~]# sed -i 's/jack/ben/g' person.txt
[root@MongoDB ~]# cat person.txt
,mike,CEO
,ben,CTO
,yy,CFO
,feixue,CIO
,tom,COO

企业案例3：指定行修改配置文件

指定行精确修改配置文件，这样可以防止修改多了地方。

[root@MongoDB ~]# sed '3s#0#9#' person.txt
,mike,CEO
,jack,CTO
,yy,CFO
,feixue,CIO
,tom,COO

变量替换

再新建一个文本

[root@MongoDB ~]# cat test.txt
a
b
a

赋值

[root@MongoDB ~]# x=a
[root@MongoDB ~]# y=b
[root@MongoDB ~]# echo $x $y
a b

把文本里所有a字符串替换成b

没有引号，用的就是双引号

[root@MongoDB ~]# sed s#$x#$y#g test.txt
b
b
b

单引号，没有变量置换功能，所见所得，是什么输出什么

[root@MongoDB ~]# sed 's#$x#$y#g' test.txt
a
b
a

双引号

[root@MongoDB ~]# sed "s#$x#$y#g" test.txt
b
b
b

分组替换\( \)和\1的使用说明

sed软件的\( \)的功能可以记住正则表达式的一部分，其中，\1为第一个记住的模式即第一个小括号中的匹配内容，\2第二记住的模式，即第二个小括号中的匹配内容，sed最多可以记住9个。

例：

echo My name is  mike,I am 13 years old. 如果想保留这一行的单词mike，删除剩下的部分，使用圆括号标记想保留的部分

[root@MongoDB ~]# echo My name is  mike,I am  years old. |sed 's#^.*is \([a-z].*\),.*$#\1#g'
mike

-r 支持正则表达式 ， 不需要 加 \

[root@MongoDB ~]# echo My name is  mike,I am  years old. |sed -r 's#^.*is ([a-z].*),.*$#\1#g'
mike

()是扩展正则表达式的元字符，sed软件默认识别基本正则表达式，想要使用扩展正则需要使用\转义，即\(\）。sed使用-r选项则可以识别扩展正则表达式，此时使用\(\）反而会出错

特殊符号&代表被替换的内容

&等于被替换的内容 0 ，把1到3行的0改成 100

[root@MongoDB ~]# sed '1,3s/0/10&/' person.txt
,mike,CEO
,jack,CTO
,yy,CFO
,feixue,CIO
,tom,COO

企业案例5：批量重命名文件

当前目录下有文件如下所示：

[root@MongoDB ~]# mkdir -p /test/
[root@MongoDB ~]# cd /test/ ; touch stu_102999_{..}_finished.jpg
[root@MongoDB test]# ls
stu_102999_1_finished.jpg  stu_102999_3_finished.jpg  stu_102999_5_finished.jpg
stu_102999_2_finished.jpg  stu_102999_4_finished.jpg

要求用sed命令重命名，效果为stu_102999_1_finished.jpg==>stu_102999_1.jpg,即删除文件名的_finished

[root@MongoDB test]# ls| sed  's#^\(.*\).finished\(.*\)#mv & \1\2#g'
mv stu_102999_1_finished.jpg stu_102999_1.jpg
mv stu_102999_2_finished.jpg stu_102999_2.jpg
mv stu_102999_3_finished.jpg stu_102999_3.jpg
mv stu_102999_4_finished.jpg stu_102999_4.jpg
mv stu_102999_5_finished.jpg stu_102999_5.jpg
[root@MongoDB test]#
[root@MongoDB test]#
[root@MongoDB test]# ls| sed  's#^\(.*\).finished\(.*\)#mv & \1\2#g'|bash
[root@MongoDB test]# ls
stu_102999_1.jpg  stu_102999_2.jpg  stu_102999_3.jpg  stu_102999_4.jpg  stu_102999_5.jpg

查

p 输出指定内容，但默认会输出2次匹配的结果，因此使用n取消默认输出

p要和 -n 配合使用

按行查询

打印文本第二行

也可以这样写 sed -n '2'p

[root@MongoDB ~]# sed -n '2p' person.txt
,jack,CTO

打印文本第二行，第三行

说明：取行就用sed，最简单

[root@MongoDB ~]# sed -n '2,3p' person.txt
,jack,CTO
,yy,CFO

打印奇数行

[root@MongoDB ~]# sed -n '1~2p' person.txt
,mike,CEO
,yy,CFO
,tom,COO

把所有行打印， sed -n ''p person.txt

或者

[root@MongoDB ~]# sed -n 'p' person.txt
,mike,CEO
,jack,CTO
,yy,CFO
,feixue,CIO
,tom,COO

[root@MongoDB ~]# sed -n ''p person.txt
,mike,CEO
,jack,CTO
,yy,CFO
,feixue,CIO
,tom,COO

按字符串查询

打印 匹配对应字符串的行

打印jack的行

[root@MongoDB ~]# sed -n '/jack/p' person.txt
,jack,CTO

打印jack字符串 到 feixue字符串的行

[root@MongoDB ~]# sed -n '/jack/,/feixue/p' person.txt
,jack,CTO
,yy,CFO
,feixue,CIO

混合查询

打印第二行到 feixue那行

[root@MongoDB ~]# sed -n '2,/feixue/p' person.txt
,jack,CTO
,yy,CFO
,feixue,CIO

如何只用一个sed取出第2和第4行???

[root@MongoDB ~]# sed -n '2p;4p' person.txt
,jack,CTO
,feixue,CIO