Linux CPU 占用率 100% 排查五步法

淡淡的烟草味﹌ 2024-03-17 11:56 135阅读 0赞

> 本文由 [简悦 SimpRead][SimpRead] 转码， 原文地址 [www.toutiao.com][]

> 你有没有遇到过这种情况，Linux 服务器 CPU 占用率达到 100% 且一直居高不下，严重影响业务系统的正常使用，这时候领导让你来排查问题原因，如果不

你有没有遇到过这种情况，Linux 服务器 CPU 占用率达到 100% 且一直居高不下，严重影响业务系统的正常使用，这时候领导让你来排查问题原因，如果不知道该如何下手，就有点尴尬了。

![78511bd28ed171f7ea0dbb7d957d95ed.png][]

排查思路总共分为五步，按照步骤操作，只要你有手就行。正确的排查方法，有助于快速的定位并解决问题。

1.  **top 命令定位应用进程 pid**
2.  **top -Hp \[pid\] 定位应用进程对应的线程 tid**
3.  **printf “%x\\n” \[tid\] 将 tid 转换为十六进制**
4.  **jstack \[pid\] | grep -A 10 \[tid 的十六进制\] 打印堆栈信息**
5.  **根据堆栈信息分析问题**

![86eb5c1ee4a8666532a4416bf92c19e9.png][]

我们来搞个示例实战操作下，加深下印象。先搞个测试项目的代码，打包上传到测试服务器，并启动服务（java -jar demo-0.0.1-SNAPSHOT.jar）。

import org.springframework.web.bind.annotation.GetMapping;
    import org.springframework.web.bind.annotation.PathVariable;
    import org.springframework.web.bind.annotation.RequestMapping;
    import org.springframework.web.bind.annotation.RestController;
    /**
     * CPU占用率测试方法
     * @author： 八零后琐话
     * @date： 2023-06-03
     */
    @RequestMapping("/api")
    @RestController
    public class CpuTestController {
        @GetMapping("/cpu/{count}")
        public long cpuRunning(@PathVariable("count") long count) {
            long result = 0;
            for (int i = 0; i < count; i++) {
                result++;
            }
            return result;
        }
    }

**调用接口**：curl  
http://localhost:9999/api/cpu/10000000000，发现 CPU 一会儿就飙到了 100%，接下来我们按五步法探个究竟。

**第一步：找到最耗 CPU 的进程 pid**

// 执行 top 命令，按shift + p 组合键，按照CPU占用率排序
    > top

![16dd77db5e1e9205c0f06b14b8be4d1e.png][]

从图中，我们可以看到进程 pid 为 **11168** 的占用 CPU 是最高的，直接是 100%。

**第二步：找到最耗 CPU 的线程 tid**

// 执行 top -Hp [pid] 定位应用进程对应的线程 tid
    // 按shift + p 组合键，按照CPU占用率排序
    > top -Hp 11168

![4897a1059798d2ce24dd6c5802ff63a3.png][]

从图中，我们可以看到线程 tid 为 **11196** 占用 CPU 是最高的，达到 99.9%。

**第三步：将线程 pid 转化为 16 进制**

// printf "%x\n" [tid]  将tid转换为十六进制
    > printf "%x\n" 11196
    2bbc

![7eb55daaab21762ad43bfa103fb35ca8.png][]

**第四步：查看线程的堆栈信息**

// jstack [pid] | grep -A 10 [tid的十六进制]  打印堆栈信息
    > jstack 11168 | grep -A 10 2bbc

![6bfa5b4af37b3cfa15deee36f630580b.png][]

我们不难发现原来是 CpuTestController 的第 24 行搞的鬼。

**第五步：根据堆栈信息分析问题**

找到对应的代码看一下，果真如此，问题已定位，优化代码逻辑吧~~~~

\[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-PvkBGnPw-1687926153794)(https://p3-sign.toutiaoimg.com/tos-cn-i-qvj2lq49k0/b7bf2efb446d43f9aa3dc885f8cd1719~noop.image?\_iz=58558&from=article.pc\_detail&x-expires=1688529537&x-signature=7X8yi%2FSNpG2f1EVrCdbEZwWU7ig%3D)\]

当然，除了使用上面的基础方法外，还有很多工具可以直接使用，例如阿里的 Arthas。

> Arthas 官网：  
> https://arthas.aliyun.com/doc/
> 
> Arthas 是一款线上监控诊断产品，通过全局视角实时查看应用 load、内存、gc、线程的状态信息，并能在不修改应用代码的情况下，对业务问题进行诊断，包括查看方法调用的出入参、异常，监测方法执行耗时，类加载信息等，大大提升线上问题排查效率。

![88232a5fa97f9c9f15dcd3699312110f.png][]

对于线上问题定位来说，分秒必争，所以我们在编码过程中，除了要实现业务功能交付，还要追求代码质量，要写出更高效、更优雅的代码。

[SimpRead]: http://ksria.com/simpread/
[www.toutiao.com]: https://www.toutiao.com/article/7240290948784062987/?app=news_article%C3%97tamp=1685942744&use_new_style=1&req_id=20230605132544D9E46606AA0BF9EC05B9&group_id=7240290948784062987&wxshare_count=1&tt_from=weixin&utm_source=weixin&utm_medium=toutiao_android&utm_campaign=client_share&share_token=67cd13c1-4d7b-41e0-9a79-59c0a786bf59&source=m_redirect&wid=1687924737721
[78511bd28ed171f7ea0dbb7d957d95ed.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/15/40f44815961d402c9d4b3535a5fdde9e.png
[86eb5c1ee4a8666532a4416bf92c19e9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/15/30a800aa5bbf4084a7a44d52a5ad4aab.png
[16dd77db5e1e9205c0f06b14b8be4d1e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/15/c3ef4163242d47f78c706aec23bc352d.png
[4897a1059798d2ce24dd6c5802ff63a3.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/15/bed100aeca57439394b416abb7f4177b.png
[7eb55daaab21762ad43bfa103fb35ca8.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/15/7fcb57a62f364bb999484457aba5bb23.png
[6bfa5b4af37b3cfa15deee36f630580b.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/15/36d77265f5b149029eb6d250eff926eb.png
[88232a5fa97f9c9f15dcd3699312110f.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/15/f29ed7d947f044c6bcfcbbbc2f3f2e64.png