在Load average 高的情况下如何鉴别系统瓶颈

在Load average 高的情况下如何鉴别系统瓶颈。是CPU不足，还是io不够快造成？ 或是内存不足？

一：查看系统负载vmstat

procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu------

r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st

0  0      0 496056 889316 4065748    0    0     9    41   55   51  0  0 99  1  0

1 : procs

procs

r  b

0  0

r ：运行和等待cpu时间片的进程数，如果长期大于1，说明cpu不足，需要增加cpu。

b ：在等待资源的进程数，比如正在等待I/O、或者内存交换等。

2 : memory

-----------memory----------

swpd   free   buff  cache

0    496056 889316 4065748

swpd ：切换到内存交换区的内存数量(k表示)。

如果swpd的值不为0，或者比较大，比如超过了100m，只要si、so的值长期为0，系统性能还是正常

free ：当前的空闲页面列表中内存数量(k表示)

buff ：作为buffer cache的内存数量，一般对块设备的读写才需要缓冲。

cache ：作为page cache的内存数量，一般作为文件系统的cache，

如果cache较大，说明用到cache的文件较多，如果此时IO中bi比较小，说明文件系统效率比较好。

3 : swap

---swap--

si   so

0    0

si ：由内存进入内存交换区数量。

so ：由内存交换区进入内存数量。

4 : IO

-----io----

bi    bo

9    41

bi ：从块设备读入数据的总量（读磁盘）（每秒kb）。

bo ：块设备写入数据的总量（写磁盘）（每秒kb）

这里我们设置的bi+bo参考值为1000，如果超过1000，而且wa值较大应该考虑均衡磁盘负载，可以结合iostat输出来分析。

5 : system 显示采集间隔内发生的中断数

--system--

in   cs

55   51

in  ：在某一时间间隔中观测到的每秒设备中断数。

cs ：每秒产生的上下文切换次数，如当 cs 比磁盘 I/O 和网络信息包速率高得多，都应进行进一步调查。

6 : cpu 表示cpu的使用状态

-----cpu------

cs us sy id wa st

51 0  0  99 1  0

us ：用户方式下所花费 CPU 时间的百分比。us的值比较高时，说明用户进程消耗的cpu时间多，但是如果长期大于50%，需要考虑优化用户的程序。

sy ：内核进程所花费的cpu时间的百分比。这里us + sy的参考值为80%，如果us+sy 大于 80%说明可能存在CPU不足。

wa  ：IO等待所占用的CPU时间的百分比。这里wa的参考值为30%，如果wa超过30%，说明IO等待严重，

这可能是磁盘大量随机访问造成的，也可能磁盘或者磁盘访问控制器的带宽瓶颈造成的(主要是块操作)。

id ：cpu处在空闲状态的时间百分比