线上CPU100%排查套路

Love The Way You Lie 2022-03-15 03:26 404阅读 0赞

下面给出两种系统环节下的排查步骤，都是一模一样的，只是命令稍有区别！

*  查消耗cpu最高的进程Pid
 *  根据Pid查出消耗cpu最高的线程号
 *  根据线程号查出对应的java线程，进行处理。

准备一行死循环代码

public class TestFor {
        public static void main(String[] args) {
            int random = 0;
            while (random < 100) {
                random = random * 10;
            }
        }
    }

怎么跑，应该不用我说了，直接教大家怎么查！

### Windows版 ###

可能有人有疑问，我为什么要说`Windows`版的！因为，我曾经给很多政府部门做过系统。我发现他们用的是`Windows Server`，不是`Linux`系统。所有必要说一下！

查消耗Cpu最高的进程PID

手边没有`Windows Server`机器，我以`Win 10`为例，截图给大家看一下，先调出`PID`显示项！  
![725429-20190124162931835-979274354.jpg][]  
然后发现进程`PID`如下图所示，为`10856`  
![725429-20190124163005449-1581351363.jpg][]  
接下来呢

根据PID查出消耗Cpu最高的线程号

这里用到微软的工具Process Explorer v16.22，地址如下  
`https://docs.microsoft.com/zh-cn/sysinternals/downloads/process-explorer`  
如图所示  
![725429-20190124163024582-1108734712.jpg][]

发现最耗`Cpu`的线程的`TID`为`6616`  
这是十进制的数据，转成十六进制为`0x19d8`

根据线程号查出对应的java线程，进行处理

执行命令

jstack -l 10856 > c:/10856.stack

打开文件`c:/10856.stack`，搜索`19d8`，如下图所示  
![725429-20190124163039962-1084066028.jpg][]

根据文件就可以看出，我们的`TestFor.java`文件第七行一直在跑，至此定位到问题

### Linux版 ###

Linux版本，步骤是一模一样的，就是命令换了一下

查消耗Cpu最高的进程PID

执行命令

*  执行`top -c` ，显示进程运行信息列表。按下P,进程按照Cpu使用率排序

如下图所示，`PID`为`3033`的进程耗费`Cpu`最高  
![725429-20190124163105258-1775017917.jpg][]

根据Pid查出消耗Cpu最高的线程号

执行命令

*  `top -Hp 3033` ，显示一个进程的线程运行信息列表。按下P,进程按照Cpu使用率排序

如下图所示，`PID`为`3034`的线程耗费Cpu最高  
![725429-20190124163146973-649536117.jpg][]

这是十进制的数据，转成十六进制为`0Xbda`

根据线程号查出对应的java线程，进行处理

jstack -l 3033 > ./3033.stack

然后执行，grep命令，看线程`0xbda`做了什么

cat 3033.stack |grep 'bda' -C 8

输出如下  
![725429-20190124163203164-573980691.jpg][]

至此定位到问题

## 总结 ##

大家记得一定要去实际操作一次！

作者：孤独烟 出处：[ http://rjzheng.cnblogs.com/][http_rjzheng.cnblogs.com]

本文版权归作者和博客园共有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文连接，否则保留追究法律责任的权利。如果觉得还有帮助的话，可以点一下右下角的【推荐】。

[725429-20190124162931835-979274354.jpg]: /images/20220315/4b5061b797824d4e819747eb693b3149.png
[725429-20190124163005449-1581351363.jpg]: /images/20220315/0763e2fdb4814b3180545903c5a01575.png
[725429-20190124163024582-1108734712.jpg]: /images/20220315/8f6e09518a704c46859e2d51bf44f88b.png
[725429-20190124163039962-1084066028.jpg]: /images/20220315/25fd0476192042849623e2a281da81d2.png
[725429-20190124163105258-1775017917.jpg]: /images/20220315/207ed459b3fc4b6785d2adbbf5d9ae78.png
[725429-20190124163146973-649536117.jpg]: /images/20220315/214de4dc78fa4973b9f18ccafc1c54b5.png
[725429-20190124163203164-573980691.jpg]: /images/20220315/d81277f69edf478ea9c02790a33f58d5.png
[http_rjzheng.cnblogs.com]: http://rjzheng.cnblogs.com/