shell工具-awk

awk

一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。

基本用法

awk [选项参数] 'pattern1{action} pattern2{action}...' filename
pattern:表示AWK在数据中查找的内容，就是匹配模式
action：在找到匹配内容时执行的一系列命令

选项参数说明

选项参数	功能描述
-F	指定输入文件拆分割符
-v	赋值一个用户定义变量

案例实操

数据准备

[root@slave2 testshell]# cp /etc/passwd ./
[root@slave2 testshell]# cat /etc/passwd
root:x:::root:/root:/bin/bash
bin:x:::bin:/bin:/sbin/nologin
daemon:x:::daemon:/sbin:/sbin/nologin
adm:x:::adm:/var/adm:/sbin/nologin
lp:x:::lp:/var/spool/lpd:/sbin/nologin
sync:x:::sync:/sbin:/bin/sync
shutdown:x:::shutdown:/sbin:/sbin/shutdown
halt:x:::halt:/sbin:/sbin/halt
mail:x:::mail:/var/spool/mail:/sbin/nologin
operator:x:::operator:/root:/sbin/nologin
games:x:::games:/usr/games:/sbin/nologin
ftp:x:::FTP User:/var/ftp:/sbin/nologin
nobody:x:::Nobody:/:/sbin/nologin
systemd-network:x:::systemd Network Management:/:/sbin/nologin
dbus:x:::System message bus:/:/sbin/nologin
polkitd:x:::User for polkitd:/:/sbin/nologin
sshd:x:::Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x::::/var/spool/postfix:/sbin/nologin
chrony:x::::/var/lib/chrony:/sbin/nologin
elsearch:x::::/home/elsearch:/bin/bash

搜索passwd文件以root关键字开头的所有行，并输出该行的第7列

[root@slave2 testshell]# awk -F: '/^root/{print $7}' passwd
/bin/bash

搜索passwd文件以root关键字开头的所有行，并输出该行的第1和7列,中间以逗号分割

[root@slave2 testshell]# awk -F: '/^root/{print $1","$7}' passwd
root,/bin/bash
[root@slave2 testshell]# awk -F: '/^root/{print $1$7}' passwd
root/bin/bash

只显示/passwd文件的第一列和第七列，以逗号分割，且在所有行前面添加列名user，shell在最后一行添加“dahaige，/bin/zuishuai”

[root@slave2 testshell]# awk -F: 'BEGIN{print "user,shell"} {print $1","$7} END{print "dahaige,/bin/zuishuai"}' passwd
user,shell
root,/bin/bash
bin,/sbin/nologin
daemon,/sbin/nologin
adm,/sbin/nologin
lp,/sbin/nologin
sync,/bin/sync
shutdown,/sbin/shutdown
halt,/sbin/halt
mail,/sbin/nologin
operator,/sbin/nologin
games,/sbin/nologin
ftp,/sbin/nologin
nobody,/sbin/nologin
systemd-network,/sbin/nologin
dbus,/sbin/nologin
polkitd,/sbin/nologin
sshd,/sbin/nologin
postfix,/sbin/nologin
chrony,/sbin/nologin
elsearch,/bin/bash
dahaige,/bin/zuishuai

将passwd文件中的用户id增加数值1并输出

[root@slave2 testshell]# awk -F : -v i= '{print $3+i}' passwd 

awk的内置变量

变量	说明
FILENAME	文件名
NR	已读的记录数
NF	浏览记录的域的个数（切割后列的个数）

案例实操

统计passwd文件名，每行的行号，每行的列数

[root@slave2 testshell]# awk -F: '{print "filename:" FILENAME ", linenumber:" NR ",columns:" NF}' passwd
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:
filename:passwd, linenumber:,columns:

切割IP

[root@slave2 testshell]# ifconfig ens33 | grep "inet "
        inet 192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[root@slave2 testshell]# ifconfig ens33 | grep "inet "
        inet 192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[root@slave2 testshell]# ifconfig ens33 | grep "inet " | awk -F "inet " '{print $2}'
192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[root@slave2 testshell]# ifconfig ens33 | grep "inet " | awk -F "inet " '{print $2}' | awk -F " " '{print $1}'
192.168.242.22

查询sed.txt中空行所在的行号

[root@slave2 testshell]# cat sed.txt
dong shen
guan zhen
wo  wo
lai  lai

le  le
[root@slave2 testshell]# awk '/^$/{print NR}' sed.txt