在监控系统性能时，我们经常会看到 CPU 的 I/O Wait 指标突然升高。本文将介绍如何分析和处理这种情况。

分析过程

1. 检查系统 I/O 情况

   I/O 可分为磁盘 I/O 和网络 I/O。对于磁盘 I/O，可以使用以下命令：

   • dstat ：观察 CPU 和 I/O 的使用情况
   • pidstat -d ：查询进程的 I/O 情况

2. 检查应用进程

   使用 ps 命令查看应用进程，并查询其父进程。

3. 分析函数调用

   使用 perf 命令采集性能事件，分析应用的函数调用。

   • perf record -ag -p {pid} --sleep 10 ：录制全局性能事件
   • perf record -g ：采集指定 PID 的所有 CPU 的性能事件，周期为 10 秒
   • perfreport ：分析报告

思路总结

首先检查磁盘 I/O 和网络 I/O，找出 I/O 问题所在。 如果是磁盘 I/O 问题，则进一步检查应用进程和函数调用。 根据分析结果，采取适当的措施，例如优化磁盘 I/O、调整应用程序或升级硬件。

知识补充

进程状态

僵尸进程：已退出但仍存在于进程表中的进程。

---

linux占用cpu过高排查linux占用cpu

详解Linux如何查看当前占用CPU或内存最多的几个进程？

可以使用一下命令查使用内存最多的5个进程ps-aux|sort-k4nr|head5或者top（然后按下M，注意大写）可以使用一下命令查使用CPU最多的5个进程ps-aux|sort-k3nr|head5或者top（然后按下P，注意大写）

linuxtopcpu占用很高和windows一样吗？

两种系统的机制不一样。widows程序默认只有当前运行的程序和一些系统程序、常驻程序在内存中，其他的程序都暂存在虚拟内存中（也就是硬盘上）；而LINUX默认的是程序先填满内存，也就是LINUX会尽量把所有打开的程序都保留在内存当中，所以从内存占用上看是LINUX比WINDOWS占内存大。

至于CPU的占用率，我想是这样的：windows本身就是图形化的操作系统，而linux则不是；所以在图形化界面linux运行速度比较慢（至少我感觉是这样子的）。而且我认为linux的bufferframe机制对显卡的硬加速支持的不好（bufferframe机制默认所有的图形操作都是由CPU处理的），所以这也导致了CPU的占用高——我不知道新的一代的图形显示机制是否能够发挥显卡的真正功效。

linux程序systemcpu占用较高说明什么问题？

这说明你的程序在执行过程中，有如下几种情况中的一种或者多种情况发生：

1.进入了一个死循环无法跳出来；

2.也许是一直在等待一个信号，如从dbus上读取一个你需要的信息；

3.有可能是你的程序在对一个非常大的内容进行分析和处理；

4.有可能是你的程序要处理的问题比较多，所以在一个个慢慢的执行。大部分是由上面四种情况引起的，在这四种情况中，第一种情况坚决要避免，因为不如此，那么你的CPU资源将会被吃光。

第二种情况，我的想法是，你要修改一下，看看有没有什么更快，更高效的方法来获取到需要的信号，或者是不去获取信号，而是改用其他方式来处理。

第三和第四两种情况，就要根据你的实际需要来定了。如果是必须这样做，那么也只能够耐心的等待了。但是可以考虑优化代码，优化算法的方式来提高效率。Linux系统下有个很好的调试工具gdb。如果不知道自己的程序出现了什么问题，可以利用gdb工具逐步执行，去查找错误所在。

Linux系统性能评估

一、Linux查看系统cpu个数、核心数、线程数(1)、查看物理cpu个数grep physical id /proc/cpuinfo | sort -u | wc -l(2)、查看核心数量grep core id /proc/cpuinfo | sort -u | wc -l(3)、查看线程数(逻辑cpu)grep processor /proc/cpuinfo | sort -u | wc -l每个物理CPU中逻辑CPU(可能是core, threads或both)的个数：grep siblings /proc/cpuinfo | sort -u命令执行结果如图所示，根据结果得知，此服务器有1个cpu，6个核心，每个核心2线程，共12线程。 通过dmidecode可以查看cpu型号，根据型号也可以查到这个cpu的具体参数二、Linux服务器性能评估(cpu，内存，磁盘IO)(1)、影响Linux服务器性能的因素a、 操作系统级CPU内存磁盘I/O带宽网络I/O带宽b、程序应用级(2)、系统性能评估标准 影响性能因素 评判标准 好 坏 糟糕 CPU user% + sys% 70% user% + sys%= 85% user% + sys% =90% 内存 Swap In(si)＝0Swap Out(so)＝0 Per CPU with 10 page/s More Swap InSwap Out 磁盘 iowait %20% iowait % =35% iowait % = 50% 其中：%user：表示CPU处在用户模式下的时间百分比。 %sys：表示CPU处在系统模式下的时间百分比。 %iowait：表示CPU等待输入输出完成时间的百分比。 swap in：即si，表示虚拟内存的页导入，即从SWAP DISK交换到RAMswap out：即so，表示虚拟内存的页导出，即从RAM交换到SWAP DISK。 (3)、系统性能分析工具1.常用系统命令Vmstat、sar、iostat、netstat、free、ps、top等2.常用组合方式o 用vmstat、sar、iostat检测是否是CPU瓶颈o 用free、vmstat检测是否是内存瓶颈o 用iostat检测是否是磁盘I/O瓶颈o 用netstat检测是否是网络带宽瓶颈(4)、Linux性能评估与优化1. 系统整体性能评估(uptime命令)[root@server ~]# uptime16:38:00 up 118 days, 3:01, 5 users, load average: 1.22, 1.02, 0.91这里需要注意的是：load average这个输出值，这三个值的大小一般不能大于系统CPU的个数，例如，本输出中系统有8个CPU,如果load average的三个值长期大于8时，说明CPU很繁忙，负载很高，可能会影响系统性能，但是偶尔大于8时，倒不用担心，一般不会影响系统性能。 相反，如 果load average的输出值小于CPU的个数，则表示CPU还有空闲的时间片，比如本例中的输出，CPU是非常空闲的。 2. CPU性能评估(1)利用vmstat命令监控系统CPU该命令可以显示关于系统各种资源之间相关性能的简要信息，这里我们主要用它来看CPU一个负载情况。 下面是vmstat命令在某个系统的输出结果：