Linux命令之awk数组使用范例

取ifconfig bond0的IP地址 1

命令如下： 2

统计apache日志单IP访问请求数排名 2

第一种方法 2

取ifconfig bond0的IP地址

 [root@xuegod68 mnt]# ifconfig bond0

 bond0 Link encap:Ethernet HWaddr :0C:::8F:AD

 inet addr:192.168.1.123 Bcast:192.168.1.255 Mask:255.255.255.0

 inet6 addr: fe80::20c:29ff:fe27:8fad/ Scope:Link

 UP BROADCAST RUNNING MASTER MULTICAST MTU: Metric:

 RX packets: errors: dropped: overruns: frame:

 TX packets: errors: dropped: overruns: carrier:

 collisions: txqueuelen:

 RX bytes: (36.7 MiB) TX bytes: (1008.6 KiB)

命令如下：

 [root@xuegod68 mnt]# ifconfig bond0 |awk -F "[ :]+" 'NR==2{print NR" "$4}'

  192.168.1.123

统计apache日志单IP访问请求数排名

 [root@xuegod68 mnt]# head - .txt

 10.0.0.3 -- [/Mar/-::+]*GET/HTTP/1.1*  *-*

 10.0.0.3 -- [/Mar/-::+]*GET/HTTP/1.1*  *-*

 10.0.0.5 -- [/Mar/-::+]*GET/HTTP/1.1*  *-*

 10.0.0.3 -- [/Mar/-::+]*GET/HTTP/1.1*  *-*

 10.0.0.6 -- [/Mar/-::+]*GET/HTTP/1.1*  *-*

第一种方法

[root@xuegod68 mnt]# awk '{print $1}' .txt |sort|uniq -c

 10.0.0.3

 10.0.0.4

 10.0.0.5

 10.0.0.6

第二种方法

[root@xuegod68 mnt]# awk '{array[$1]++} END {for(key in array) print key,array[key]}' 2.txt

10.0.0.3 35

10.0.0.4 5

10.0.0.5 10

10.0.0.6 10

统计域名访问量

[root@xuegod68 mnt]# cat .txt

http://www.baidu.com/index.html

http://www.163.com/1.html

http://www.cnblogs.com/index.html

http://www.baidu.com/2.html

http://www.163.com/index.html

http://www.qq.com/index.html

http://www.baidu.com/3.html

http://www.163.com/2.html

http://www.baidu.com/2.html

第一种方法：

 [root@xuegod68 mnt]# awk '{split($0,array,"/+");key=array[2];count[key]++}END{for(kk in count) print kk,count[kk]}' .txt

 www.qq.com 

 www.cnblogs.com 

 www.baidu.com 

 www..com

第二种方法：

 [root@xuegod68 mnt]# awk -F [/]+ '{array[$2]++} END {for(key in array) print key,array[key]}' .txt

 www.qq.com 

 www.cnblogs.com 

 www.baidu.com 

 www..com

计算每个人的总工资和平均工资

 [root@xuegod68 mnt]# cat .txt

  wodi 12k

  yingsui 15k

  jeacen 10k

  yideng 10k

  kuqi 8k

  xiaofen 6k

  wodi 11k

  yingsui 12k

  jeacen 4k

  kuqi 12k

  yideng 11k

  xiaofen 10k

命令如下：

[root@xuegod68 mnt]# awk '{array[$2]+=$3;count[$2]++}END{for(key in array) print key,array[key]"k",array[key]/count[key]}' 3.txt

kuqi 20k 10

jeacen 14k 7

yingsui 27k 13.5

xiaofen 16k 8

wodi 23k 11.5

yideng 21k 10.5

对本地IP和远程IP去重并统计重复数

 [root@xuegod68 mnt]# cat .txt

 Proto Recv-Q Send-Q Local Addree Foreign Addree              State

 tcp                      0.0.0.0:         0.0.0.0:*     LISTEN

 tcp                      115.29.49.213: 117.136.27.254:     SYN_RECV

 tcp                      115.29.49.213:     113.97.117.157:     SYN_RECV

 tcp                      115.29.49.213:     117.136.40.20:     SYN_RECV

 tcp                      115.29.49.213:     117.136.40.20:     SYN_RECV

 tcp                      115.29.49.213:     121.236.219.69:     SYN_RECV

 tcp                      0.0.0.0:         0.0.0.0:*     LISTEN

 tcp                      0.0.0.0:     0.0.0.0:*         LISTEN

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

 unix          [] SYREAM CONNECTED  /TMP/MYSQL.SOCK

命令如下：

 [root@xuegod68 mnt]# awk -F "[ :]+" '/^tcp/{array[$3" "$5]++}END{for(key in array) print key,array[key]}' .txt

 115.29.49.213 113.97.117.157 

 115.29.49.213 117.136.27.254 

 0.0.0.0 0.0.0.0 

 115.29.49.213 117.136.40.20 

 115.29.49.213 121.236.219.69

统计源IP，端口及目的IP同时去重

 [root@xuegod68 mnt]# head - .txt

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 10.0.0.131:->210.192.121.172: on ixp7) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 10.0.0.131:->210.192.121.172: on ixp7) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 10.0.0.131:->210.192.121.172: on ixp7) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 10.0.0.131:->210.192.121.172: on ixp7) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 10.0.0.131:->210.192.121.172: on ixp7) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 10.0.0.43:->203.81.19.92: on ppp6) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (UDP 10.0.0.19:->121.14.96.233: on ppp0) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (UDP 172.16.1.103:->211.147.6.3: on ppp2) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 172.16.1.203:->61.135.163.86: on ixp7) [,]

 Dec  :: 10.0.0.0  RV016 RGFW-OUT:ACCEPT (TCP 10.0.0.131:->210.192.121.172: on ixp7) [,]

命令如下：

 [root@xuegod68 mnt]# vim .sh

 {

 split($,array,":|->")

 sip=array[]

 sport=array[]

 mip=array[]

 if (!((sip,sport,mip) in tree)){

 tree[sip,sport,mip] = 

 }

 }

 END{

 for (key in tree)

 print key

 }

 [root@xuegod68 mnt]# awk -f .sh .txt

 172.16.1.10357318211.147.6.

 10.0.0.191441121.14.96.

 172.16.1.203437261.135.163.

 10.0.0.4354963203.81.19.

 10.0.0.1311227210.192.121.

美化效果如下：

[root@xuegod68 mnt]# cat 5.sh

BEGIN{

	printf("%-16s %-6s %-16s\n","SIP","SPORT","MIP")

}

{

	split($9,array,":|->")

	sip=array[1]

	sport=array[2]

	mip=array[3]

	if (!((sip,sport,mip) in tree)){

	tree[sip,sport,mip] = 1

	}

}

END{

	for (key in tree){

		split(key,out,SUBSEP)

	printf("%-16s %-6s %-16s\n", out[1],out[2],out[3])

	}

}

 [root@xuegod68 mnt]# awk -f .sh .txt

 SIP SPORT MIP

 172.16.1.103  211.147.6.3

 10.0.0.19  121.14.96.233

 172.16.1.203  61.135.163.86

 10.0.0.43  203.81.19.92

 10.0.0.131  210.192.121.172

Linux命令之awk数组使用范例的更多相关文章

【linux】linux命令grep + awk 详解
linux命令grep + awk 详解 grep:https://www.cnblogs.com/flyor/p/6411140.html awk:https://www.cnblogs.com ...
linux命令之awk命令
awk是一种编程语言,用于在linux/unix下对文本和数据进行处理.数据可以来自标准输入(stdin).一个或多个文件,或其它命令的输出.它支持用户自定义函数和动态正则表达式等先进功能,是linu ...
程序猿必知必会Linux命令之awk
前言对于一名专业的程序员来说,Linux相关知识是必须要掌握的,其中对于文本的处理更是我们常见的操作,比如格式化输出我们需要的数据,这些数据可能会来源于文本文件或管道符,或者统计文本里面我们需要的数 ...
Linux常用基本命令：三剑客命令之-awk数组用法
AWK的数组用法跟javascript类似. 1,定义数组 awk 'BEGIN{a[0]="zhangsan";a[1]="lisi";print a[0]} ...
linux命令之awk
简介 awk命令的名称是取自三位创始人Alfred Aho .Peter Weinberger 和 Brian Kernighan姓名的首字母,awk有自己的程序设计语言,设计简短的程序,读入文件,数 ...
Linux 命令的20个实用范例，入门必看！
Tips: 达内Linux云计算免费课程火热抢报中,点击文末“阅读原文”快速抢! Linux中一个基本命令是ls.没有这个命令,我们会在浏览目录条目时会遇到困难.这个命令必须被每个学习Linux的人知 ...
Linux命令之乐--awk
1.脚本参数传值 #/bin/bash awk '"} {if(($1==a)) print $2;}' /etc/hosts 执行结果:
linux命令和awk
1.统计一下代码量 find . -name "*.py" | xargs wc -l | awk 'BEGIN {size = 0} { size+=$1} END{print ...
Linux命令：awk求和、平均值、最大最小值
本文链接:https://blog.csdn.net/wyqwilliam/article/details/825600431.求和cat data|awk '{sum+=$1} END {print ...

随机推荐

分支界定法 branch-and-bound 分析与实现）（转载）
1. 介绍分支界定法之前需要了解一下广度优先搜索breadth-First-search(BFS) 1.从图中某个顶点V0出发,并访问此顶点:以层为顺序,一层一层往下遍历 2.从V0出发,访问V0的各 ...
python之路-Day6
time & datetime模块 #_*_coding:utf-8_*_ __author__ = 'Alex Li' import time # print(time.clock()) # ...
Tcc学习笔记（一）开篇
TCC,全称Tiny C Compiler(http://bellard.org/tcc/),是一个颇具特色的C编译器,你能把它当作一个C语言解释器来用,也可以嵌入你自己的应用程序作一个动态代码生成器 ...
jquery里面的名称冲突解决方法
jQuery 使用 $ 符号作为 jQuery 的简介方式. 某些其他 JavaScript 库中的函数(比如 Prototype)同样使用 $ 符号. jQuery 使用名为 noConflict( ...
在各方面还没准备好的时候，大家一定要慎用border-box样式！！！！
这几天,我被一个js问题困扰到癫狂了! 事情是这样的,我之前写了个功能非常复杂的纯jquery代码的前端gridview控件,实现了大量的功能和效果,在一些项目里也用得很好. 最近有个项目,样式做了调 ...
TimeQuest学习
1.物理时钟特性:clock skew(时钟差),jitter(拉动),clock latency(时钟潜伏),这些物理时钟特性又称为uncertainl--非定性,或非理想性. clock skew ...
AndroidStudio关联svn并上传代码到svn服务器上
打开AndroidStudio,按Ctrl+Shif+S快捷键,进入Settings设置页面.如上图所示,找到Version Control->点击Subversion->右边框口中勾选U ...
09-JAVA中的异常处理
1. 程序执行结果: 也就是它根本就没抛出异常,更别提捕获异常了.那么,为什么会这样呢? 原来, 如上面程序展示,程序运行到k=i/j;的时候,就会直接终止,根本就不会运行到监视的程序,更不会运行到捕 ...
使用guava进行对字符串的加锁
java的synchronized关键字是堆某对象加锁,但是我们当需要对某个字符串加锁怎么办比如对同一个订单只能有一个操作,但是对其他订单的操作不影响使用 guava包下的 Interner 类 ...
C#中的线程(一)入门
文章系参考转载,英文原文网址请参考:http://www.albahari.com/threading/ 作者 Joseph Albahari, 翻译 Swanky Wu 中文翻译作者把原文放在了& ...

Linux命令之awk数组使用范例

取ifconfig bond0的IP地址

统计apache日志单IP访问请求数排名

第一种方法

第二种方法

统计域名访问量

第一种方法：

第二种方法：

计算每个人的总工资和平均工资

命令如下：

对本地IP和远程IP去重并统计重复数

命令如下：

统计源IP，端口及目的IP同时去重

命令如下：

美化效果如下：

Linux命令之awk数组使用范例的更多相关文章

随机推荐

热门专题