都会_阿里云K8s容器Pod中Java进程CPU占比100%排查

篇首语：本文由编程笔记#小编为大家整理，主要介绍了阿里云K8s容器Pod中Java进程CPU占比100%排查相关的知识，希望对你有一定的参考价值。

线上Java基于SpringBoot框架的服务一共4个POD节点&＃xff0c;其中有一个节点重启之后CPU占比100%。

系统整体基于阿里云K8s部署&＃xff0c;接入了阿里云的ARMS监控。

1.发现CPU占比100%的节点 

从上图看出这个pod只有1核&＃xff0c;实际上这个pod是部署在node上&＃xff0c;node是32核心的。是设置了pod的limit&＃61;1。

查看CPU核数

#cat /proc/cpuinfo 

2.到容器里看Java进程CPU占比 

#top一看确实是java 占用CPU100%

 3.分析Java的线程堆栈信息

这一步是确定影响性能的线程在做什么

#top -Hp 7

 #jstack 7

注意jstack只能附加进程&＃xff0c;不能附加线程。线程需要过滤。

#jstack 7 &>jstack20220817-2216.txt

导出

其中1723和5455那几个是问题线程&＃xff0c;查看其16进制编码

#printf "%x\\n" 5455

#jstack 7|grep 0x154f

这是从之前的jstack导出的文本文件搜索

 基本可以定位是ARMS导致的。

4.从阿里云自身的线程信息也可以看出是ARMS问题

5.火焰图查看 

从火焰图看出没有阻塞在pinpoint了&＃xff0c;ARMS底层应该是基于pinpoint的。

从上面看出来不同的分析工具最终都会指向同一个结果。