Linux 三剑客常用命令

shell三剑客
===================================================grep====================================================
grep 的全程为Global search Regular Expression and Print out the line （类似windows 平台的ctrl+F）
#过滤出/etc/passwd 包含root的行
cat /etc/passwd|grep root
# 不区分大小写搜索root行:-i
grep -i root /tmp/passwd
#显示搜索结果的行号:-n
grep -n root /tmp/passwd
#统计搜索到root的行数，计数:-c
grep -c root /tmp/passwd
#精确匹配root行:-w
cat /tmp/passwd |grep -w root
#搜索包含root和mail的行: egrep|grep -E
cat /etc/passwd | grep -e root -e mail
cat /etc/passwd | egrep "root|mail"
cat /etc/passwd | grep -E "root|mail"
#屏蔽标准输出:-q quiet 静默模式
cat /etc/passwd | grep -q "root" |echo $?配合使用
#只打印匹配项root：-o only
cat /etc/passwd | grep -o "root"
#打印除了包含root的行 -v(取反)
cat /etc/passwd |grep -v "root"

==================================sed======================================
string+edit=流编辑器
sed 两个空间：模式空间，保持空间
模式空间：sed处理文本内容行的一个临时缓冲区，模式空间中的内容会主动打印到标准输出，并自动清空模式空间
保持空间：sed处理文本内容行的另一个临时缓冲区，不同的是保持空间内容不会主动清空，也不会主动打印到标准输出，而是需要sed命令来进行处理
小写的都是表示：覆盖
大写的都是表示：追加
n|N(next)
n : 读取下一行覆盖模式空间中的行
N:读取下一行并追加到模式空间中的行后面
x:exchange 空间交换
把模式空间中的内容he保持空间中的内容互换，初始保持空间中为空
h|H（hold）
h:把模式空间中的内容覆盖至保持空间中
H:把模式空间中的内容追加至保持空间中
g|G(get)
g:把保持空间中的内容覆盖至模式空间中
G:把保持空间中的内容追加至模式空间中

用法: sed [选项]... {脚本(如果没有其他脚本)} [输入文件]...
-i:会修改源文件！
-n:取消自动打印模式空间的内容
s:表示替换
p:print 表示打印
d:delete 表示删除
a:append 表示追加
i:insert 表示插入
c:整行替换
w:write 将匹配行写入指定文件内
r:read 读取指定文件.文件合并
=:用来显示行号的
!:表示取反的意思

#将所有的root替换为huazai007
sed -i 's/root/huazai007/g' /etc/passwd
#指定从第二个huazai007 开始替换为root
sed -i "s/huazai007/root/2g" /tmp/passwd
#将mail替换为ligenjian(只打印，不修改源文件！)
sed 's/mail/ligenjian/' /etc/passwd|grep ligenjian
#将以ftp开头的替换为ftp_wg(不修改源文件)
&：表示被匹配的字符（ftp）
sed "s/^ftp/ftp_wg/g" /tmp/passwd | grep ftp_wg
sed "s/^ftp/&_wg/g" /tmp/passwd | grep ftp_wg
#打印第10行
sed -n '10p' /etc/passwd
#打印 第5行到第10行的内容
sed -n '5,10p' /etc/passwd
#从第5行开始，往下打印3行
sed -n '5,+3p' num
#打印奇数行
sed -n '1~2p' num
#打印偶数行
sed -n '2~2p' num
#删除第二行
sed '2d' num
#删除 1-3行
sed '1,3d' num
#删除空行（^开头 $结尾）
sed '/^$/d' num
#删除以huazai007开头的行
sed '/^huazai007/d' /tmp/passwd |grep huazai
#删除以bash 结尾的行
sed '/bash$/d' /etc/passwd|grep bash
#在以ftp开头的行后面追加一行字符“wg001”
sed '/^ftp/a"wg001"' /etc/passwd
#在以nologin 结尾的行后面追加一行字符“bw007”
sed '/nologin$/a"bw007"' /etc/passwd
#在第三行给我追加一个字符“wg002”
sed '3a"wg002"' /etc/passwd
#在第三行的前面插入一行字符“wg003”
sed '3i"wg003"' /etc/passwd
#在以mail开头的行前面插入一行字符“wg004”
sed '/^mail/i"wg004"' /etc/passwd
#将包含mail的行整行替换为“wg005”
sed '/mail/c"wg005"' /etc/passwd
#将以nologin结尾的整行替换为 wg006
sed '/nologin$/c"wg005"' /etc/passwd
#将以nologin结尾的行 写入到指定文件：result.txt里
sed '/nologin$/w /tmp/result.txt' /etc/passwd
#将1-10行写入到/tmp/result.txt里
sed '1,10w /tmp/result.txt' /etc/passwd
#读取 /tmp/result.txt 并将内容写入到 以mysql开头nologin结尾的行后面
sed '/^mail.*nologin$/r /tmp/result.txt' /etc/passwd
#显示最后一行的行号
sed '$=' /etc/passwd
#除了#号开头的行都打印出来
sed -n '/^#/!p' /tmp/result.txt
==================================awk=====================================
awk 来历
其名称得自于它的创始人阿尔佛雷德·艾侯、彼得·温伯格和布莱恩·柯林汉姓氏的首个字母
awk 用法：
Usage: awk [POSIX or GNU style options] -f progfile [--] file ...
Usage: awk [POSIX or GNU style options] [--] 'program' file ...
# 打印 /etc/passwd 的第一个字段
awk -F ':' '{print $1}' /etc/passwd
#打印/etc/passwd 的最后一个字段 $NF
awk -F ':' '{print $NF}' /etc/passwd
#打印/etc/passwd 的倒数第二个字段：请使用$NF表示
awk -F ':' '{print $(NF-1)}' /tmp/passwd
NR:表示当前处理的是第几行
#打印第二行
awk 'NR==2 {print}' /etc/passwd
#打印第三行的倒数第三个字段 /etc/passwd
awk -F ':' 'NR=3 {print $(NF-2)}' /etc/passwd
#打印第三行以后的行的第一个字段 /etc/passwd
awk -F ':' 'NR>3 {print $1}' /etc/passwd
#打印第三行之前的行的第一个字段
awk -F ':' 'NR<3 {print $1}' /etc/passwd
##awk 内置函数
toupper():用于将字符变为大写
awk -F ':' '{print toupper($1)}' /etc/passwd|head -n2
tolower():用于将字符变为小写
awk '{print tolower($1)}' /tmp/aa
#打印包含root的行
awk '/root/{print}' /etc/passwd
#打印第一个字段为ftp的行
awk -F ':' '$1=="ftp" {print}' /etc/passwd
#打印第三个字段为2的行
awk -F ':' '$3=="2" {print}' /etc/passwd
#假如$1==root 打印第一个字段，否则打印第二个字段
awk -F ':' '{if ($1=="root") print;else print $2}' /etc/passwd
#假如 最后一个字段为nologin 那么打印第一个字段，否则打印第二字段
awk -F ':' '{if ($NF=="/sbin/nologin") print $1;else print $2}' /etc/passwd