服务器负载过高问题分析

╰半夏微凉° 2022-06-13 00:13 318阅读 0赞

线上服务器存在问题学习。

问题现象：

1，top命令查询服务器负载达到2.0-5之间，tomcat的cpu使用率达到104%

![Center][]

问题分析过程：

1），磁盘使用率未超出正常范围

![Center 1][]

2），内存使用率未超出正常范围还有空闲

![Center 2][]

3），服务器流量未现明显峰值

![Center 3][]

4），jvm内存状态未现异常非GC原因

![Center 4][]

综合初步预估是tomcat有线程一直在运行占用cpu资源

**问题引出：如何确定tomcat的100%的cpu使用率到底问题在哪？**

** **

**问题定位方案：**

使用java提供的是jstack线程分析命令对进程里面的线程状态进行分析，先导出线程快照再分析具体是那个线程及对应的类

执行步骤：

**第一步：**ps -ef|grep tomcat 查询出java/tomcat进程PID（eg:8209）

**第二步：**ps -aux 查询出该进程是哪个用户启动的（即使ROOT用户可能也导出线程快照失败）

![Center 5][]

**第三步：**su  tomcat 切换到进程启动用户

**第四步：**jstack -l 8209 > /usr/local/work/tomcat/8209.stack 导出PID对应的线程信息到文件

**第五步：**对导出的线程文件下载本地做分析（可以文本打开）

**第六步：**top -H -p 8209 命令查看对应进程是哪个线程占用CPU过高(eg:8308)

![Center 6][]

**第七步：**printf "%x\\n" 8308 转换十进制为十六进制 此处为：2074

**第八步：**在导出的堆栈文件中搜索线程ID等于nid=0x2074的线程，此处即列出了该线程对应的类

![Center 7][]

**第九步：**根据线程信息找到对应的类定位问题成功，找到原因：日志队列线程一直处于RUNNABLE状态，一直在while循环判定队列是否为空

![Center 8][]

[Center]: /images/20220613/b0549b01b98348dabbd9d7b842579db7.png
[Center 1]: /images/20220613/0627407c34104741948e22f0d2fe699e.png
[Center 2]: /images/20220613/ace5abfd351242779a431d5203b37973.png
[Center 3]: /images/20220613/20bc537f740f400889f77f0604181eaf.png
[Center 4]: /images/20220613/fbad7ce2f7cf4990875222f589dec4b3.png
[Center 5]: /images/20220613/f08f9f9ccb7a4aa7a7e75b66838168aa.png
[Center 6]: /images/20220613/45df5e1003be4f788115599f98237d15.png
[Center 7]: /images/20220613/1301ed510487409f971b8b8b98dc2863.png
[Center 8]: /images/20220613/8fbc763a3643414882bf63123858d837.png

发表评论取消回复

表情：

评论列表（有 0 条评论，318人围观）

还没有评论，来说两句吧...

相关阅读

相关 MySQL服务器负载过高：解决策略

当MySQL服务器负载过高时，可能会影响系统的性能和稳定性。以下是一些解决策略： 1. **优化数据库设计**： - 分区表：将大的分区数据分布到多个物理磁盘上。

太过爱你忘了你带给我的痛/ 2025年02月08日 10:51/ 0 赞/ 21 阅读

相关 MySQL服务器负载过高，性能瓶颈分析及解决方案

当MySQL服务器负载过高，通常会出现以下几种性能瓶颈： 1. **并发处理能力差**：如并发连接过多，或者并发SQL执行效率低。 2. **磁盘I/O慢**：如表空间过大

比眉伴天荒/ 2025年01月14日 22:21/ 0 赞/ 36 阅读

相关 MySQL服务器负载过高，响应延迟严重：问题分析及解决方案

MySQL服务器负载过高，响应延迟严重的问题可能由以下几个原因导致： 1. 数据量过大：如果表中的数据量非常大，会导致SQL查询执行时间增长。 2. 查询效率低：例如存在冗

偏执的太偏执、/ 2024年12月25日 05:42/ 0 赞/ 47 阅读

相关 MySQL服务器负载过高：问题分析及优化措施

当MySQL服务器负载过高时，这通常意味着数据库承受了超出其正常处理能力的查询请求。这种情况可能导致响应时间延长、数据一致性受影响甚至系统崩溃。以下是针对这个问题的分析和优化措

太过爱你忘了你带给我的痛/ 2024年12月21日 20:48/ 0 赞/ 43 阅读

相关 MySQL服务器负载过高：问题案例及解决方案

案例一：频繁的SQL查询场景描述：用户数量激增，大量的并发请求导致数据库服务器CPU使用率极高，主要表现为频繁执行耗时长的SQL语句。解决方案：优化SQL查询，通过索引提

落日映苍穹つ/ 2024年12月19日 17:57/ 0 赞/ 38 阅读

相关记一次服务器负载过高问题

早上刚到接到前方同事电话，说线上有台服务访问延迟很高，他排查了下发现内存还很充足，cpu使用率也不是很高，单就是负载出奇的高，等我到后开始一系列的排查 1. 查看服务器资源

今天药忘吃喽~/ 2023年01月23日 13:50/ 0 赞/ 249 阅读

相关服务器负载过高问题分析

线上服务器存在问题学习。问题现象： 1，top命令查询服务器负载达到2.0-5之间，tomcat的cpu使用率达到104% ![Center][

╰半夏微凉°/ 2022年06月13日 00:13/ 0 赞/ 319 阅读

相关服务器cpu负载过高问题排查

第一步：执行top命令，查出当前机器线程情况 top - 09:14:36 up 146 days, 20:24, 1 user, load average:

小灰灰/ 2022年06月09日 06:42/ 0 赞/ 335 阅读

相关服务器CPU负载过高问题查询记录

这是一个未解的疑问 -------------------- 周四晚上，有一台服务器遇到一个很怪异的现象：有流量访问时，CPU负载升到100%，但是内存使用量不大，通过NG

水深无声/ 2022年04月27日 22:34/ 0 赞/ 296 阅读

相关服务器CPU负载过高问题查询记录

这是一个未解的疑问周四晚上，有一台服务器遇到一个很怪异的现象：有流量访问时，CPU负载升到100%，但是内存使用量不大，通过NGINX切流，不接受HTTP请求，服务器...

系统管理员/ 2021年04月06日 13:26/ 0 赞/ 636 阅读