网管告警：

告警主机：YiDHLWJKFZ-js-app-

主机IP：192.168.***.***

告警项目：system.cpu.util[,iowait]

告警时间：2019.02. ::

告警等级：Warning

告警信息：Disk I/O is overloaded on YiDHLWJKFZ-js-app-

问题详情：CPU iowait time:20.14 %

当前状态：PROBLEM:20.14 %

事件ID：

top查看：（wa值为17.7%）

[root@localhost vmuser]# top

top - :: up  :,   user,  load average: 3.56, 3.45, 3.40

Tasks:  total,    running,  sleeping,    stopped,    zombie

Cpu(s):  1.0%us,  2.6%sy,  0.0%ni, 78.2%id, 17.7%wa,  0.2%hi,  0.3%si,  0.0%st

Mem:  16467984k total,  2823808k used, 13644176k free,   331524k buffers

Swap: 16383992k total,        0k used, 16383992k free,   565436k cached

  PID USER      PR  NI  VIRT  RES  SHR S %CPU %MEM    TIME+  COMMAND

   root                       D  5.3  0.0   :16.37 jbd2/sda3-

  postfix        104m  46m  S  3.7  0.3   :45.87 qmgr

  root           242m    S  3.0  0.0   :17.92 rsyslogd

 postfix          S  1.7  0.0   :00.05 local

  root             S  1.3  0.0   :44.87 master

 postfix          S  1.3  0.0   :00.05 cleanup

 root             D  1.3  0.0   :00.04 local

  postfix          S  1.0  0.0   :29.32 trivial-rewrite

 postfix          S  1.0  0.0   :00.06 cleanup

  postfix          D  0.7  0.0   :39.73 pickup

 postfix          D  0.7  0.0   :00.03 cleanup

iostat查看：（iowait值一直过高）

[root@localhost vmuser]# iostat  -x

Linux 2.6.-.el6.x86_64 (localhost.localdomain)      //      _x86_64_        ( CPU)

avg-cpu:  %user   %nice %system %iowait  %steal   %idle

           2.96    0.00    2.14   19.78    0.00   75.12

Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util

sda              12.58   361.59   28.73 1621.40   616.25 15618.31     9.84     3.72    2.25   0.53  86.86

sdb             307.71     0.01    6.02    0.00  1255.11     0.05   208.45     0.14   22.52  14.07   8.47

avg-cpu:  %user   %nice %system %iowait  %steal   %idle

           0.84    0.00    2.12   21.38    0.00   75.66

Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util

sda               0.00   465.00   36.00 1641.00   288.00 16508.00    10.02     3.27    1.98   0.58  97.30

sdb               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00

avg-cpu:  %user   %nice %system %iowait  %steal   %idle

           1.44    0.00    4.49   15.09    0.00   78.97

Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util

sda               0.00  1167.00   18.00 4016.50   144.00 40720.00    10.13     3.61    0.88   0.22  87.95

sdb               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00

avg-cpu:  %user   %nice %system %iowait  %steal   %idle

           0.44    0.00    1.19   24.88    0.00   73.50

Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util

sda               0.00   351.00   22.50  879.00   180.00  9696.00    10.96     3.25    3.68   1.10  98.90

sdb               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00

avg-cpu:  %user   %nice %system %iowait  %steal   %idle

           0.87    0.00    2.31   20.07    0.00   76.75

Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util

sda               0.00   435.50   19.00 2666.50   152.00 24512.00     9.18     3.23    1.21   0.35  93.00

sdb               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00

[root@localhost vmuser]#

iotop查看：

[root@localhost vmuser]# iotop 

Total DISK READ: 124.32 K/s | Total DISK WRITE: 6.69 M/s

  TID  PRIO  USER     DISK READ  DISK WRITE  SWAPIN     IO>    COMMAND

   be/ root        0.00 B/s  236.99 K/s  0.00 % 92.26 % [jbd2/sda3-]

  be/ postfix   124.32 K/s    0.00 B/s  0.00 % 88.09 % pickup -l -t fifo -u

  be/ postfix     0.00 B/s    0.00 B/s  0.00 %  6.21 % qmgr -l -t fifo -u

 be/ postfix     0.00 B/s   58.28 K/s  0.00 %  6.02 % cleanup -z -t unix -u

  be/ root        0.00 B/s   27.20 K/s  0.00 %  3.82 % rsyslogd -c

 be/ postfix     0.00 B/s  158.28 K/s  0.00 %  1.79 % cleanup -z -t unix -u

 be/ postfix     0.00 B/s  260.31 K/s  0.00 %  1.62 % local -t unix unix -u

 be/ postfix     0.00 B/s   19.43 K/s  0.00 %  0.75 % bounce -z -t unix -u

 be/ postfix     0.00 B/s   58.28 K/s  0.00 %  0.75 % cleanup -z -t unix -uth :/usr/local/sa/sa-agent/main/~ocal/sa/sa-agent com.transfar.sa.agent.main.Bootstrap

    rt/ root        0.00 B/s   54.39 B/s  0.00 %  0.67 % bounce -z -t unix -u

 rt/ postfix     0.00 B/s   38.85 B/s  0.00 %  0.60 % bounce -z -t unix -u

    be/ root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [ksoftirqd/]

    rt/ root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [watchdog/]

    rt/ root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [migration/]

    rt/ root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [watchdog/]

    rt/ root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [watchdog/]]

关闭不必要的postfix进程

[root@localhost vmuser]# service postfix stop

Shutting down postfix: [  OK  ]

[root@localhost vmuser]#

iowait过高处理的更多相关文章

  1. 使用blktrace排查iowait cpu高的问题

    本文转自这里,blktrace在这种情况下的使用方法值得借鉴学习. ------------------------------------------------------------------ ...

  2. iowait 过高问题的查找及解决linux

    Linux 有许多可用来查找问题的简单工具,也有许多是更高级的 I/O Wait 就是一个需要使用高级的工具来debug的问题,当然也有许多基本工具的高级用法.I/O wait的问题难以定位的原因是因 ...

  3. cpu iowait高排查的case

    在之前的常见的Java问题排查方法一文中,没有写cpu iowait时的排查方法,主要的原因是自己之前也没碰到过什么cpu iowait高的case,很不幸的是在最近一周连续碰到了两起cpu iowa ...

  4. 性能分析（4）- iowait 使用率过高案例

    性能分析小案例系列,可以通过下面链接查看哦 https://www.cnblogs.com/poloyy/category/1814570.html 前言 前面两个案例讲的都是上下文切换导致的 CPU ...

  5. %iowait和CPU使用率的正确认知

    resources 理解 %IOWAIT (%WIO) LINUX系统的CPU使用率和LOAD Linux Performance Observability Tools How Linux CPU ...

  6. 理解 %IOWAIT (%WIO)

    %iowait 是 “sar -u” 等工具检查CPU使用率时显示的一个指标,在Linux上显示为 %iowait,在有的Unix版本上显示为 %wio,含义都是一样的,这个指标常常被误读,很多人把它 ...

  7. 一个风控计算负载过高到mysql主从拆分暴露的各种设计复杂性问题以及解决方法总结

    在很多系统(包括金融类和非金融类)中,其实有大量的系统在很长的一段时间内(具体多长时间视业务的成功与否而定)都是混合型系统,也就是同时具有OLTP+OLAP的业务.我们说任何形式的存在在特定阶段都是合 ...

  8. [转载] PHP升级导致系统负载过高问题分析

    原文:http://chuansongme.com/n/797172 背景 据XX部门兄弟反应, 其在将PHP从5.3.8 升级到5.5.13 时, 开始运行正常, 运行一段时间后, 系统负载变高,达 ...

  9. 分析 PHP升级导致系统负载过高问题（转载）

    原文:http://chuansongme.com/n/797172 背景 据XX部门兄弟反应, 其在将PHP从5.3.8 升级到5.5.13 时, 开始运行正常, 运行一段时间后, 系统负载变高,达 ...

随机推荐

  1. Dubbo-admin管理平台的安装

      1.到地址 https://github.com/alibaba/dubbo 下载dubbo源码  2.解压缩zip文件到 “ D:\技术资料\zookeeper\dubbo-master\dub ...

  2. python变量、注释、程序交互、格式化输入、基本运算符

    变量                                                                                                  ...

  3. BOM （字节顺序标记）

    BOM(Byte Order Mark):字节顺序标记,出现在文本文件头部,Unicode编码标准中用于标识文件是采用哪种格式的编码. 注:计算机内部数据存储都是二进制的,只有知道一段数据的二进制存储 ...

  4. indexOf() 如何判断一个元素在指定数组中是否存在？ 找出指定元素出现的所有位置？ indexOf()方法 是正序查找，lastIndexOf()是倒叙查找

    indexOf()方法返回在数组中可以找到一个给定元素的第一个索引,如果不存在,则返回-1. let a = [2, 9, 7, 8, 9]; a.indexOf(2); // 0 a.indexOf ...

  5. 吴裕雄 python深度学习与实践（9）

    import numpy as np import tensorflow as tf inputX = np.random.rand(100) inputY = np.multiply(3,input ...

  6. Codeforces Round #439 C. The Intriguing Obsession

    题意:给你三种不同颜色的点,每种若干(小于5000),在这些点中连线,要求同色的点的最短路大于等于3或者不连通,求有多少种连法. Examples Input 1 1 1 Output 8 Input ...

  7. 【VBA】ExcelファイルのOpen

    ※変数の定義を強制する方法: 一番上に.「Option Explicit」を追加して.変数の定義が必須となる. ソース Private Sub CommandButton2_Click() //スクリ ...

  8. 150. Evaluate Reverse Polish Notation逆波兰表达式

    ［抄题］: Evaluate the value of an arithmetic expression in Reverse Polish Notation. Valid operators are ...

  9. Less入门及知识点整理

    LESS « 一种动态样式语言 文档链接:http://www.bootcss.com/p/lesscss/ 百科 Less 是一门 CSS 预处理语言,它扩充了 CSS 语言,增加了诸如变量.混合( ...

  10. JavaSE基础知识（5）—面向对象（5.2类的成员）

    一.属性 1.语法 数据类型 属性名 [= 属性值]; 2.特点 ①属性的数据类型可以为任意类型,包含基本类型或引用类型②属性可以不用手动赋值,有默认值 int——0 double——0.0 char ...