1 背景

我们经常遇到某个java进程占用CPU非常高，但又不知道他正在做什么，被什么线程给阻塞了。当然这些信息苍穹的monitor都能监控得到，非常简单就能定位到问题。但苍穹的monitor通常是通过nginx转发到web节点，再由web节点远程调用访问到其他微服务节点的monitor去的，当微服务节点近乎hang住时，monitor的web界面就刷不出信息来了。这时我们可以直接到容器中手动跟踪线程堆栈来定位问题。

2 操作步骤

3 分析案例

（1）top命令查看获取占用高的线程号（-p 1 表示容器中1号进程，即java主进程）

# top -H -p 1 

从top命令中我们查看到5526这个线程的pid占用CPU高。

# printf "%0x" 5526

获取到5526这个pid其16进制值是0x1596，然后可以在日志文件中查找对应的线程堆栈信息

这个线程堆栈信息里面还有对应的traceId，可以继续从monitor里面分析整个调用信息。

最后，由于上述方法分三步查询起来会比较费时间，有些执行时间短但是执行次数多的情况就不太适合了，可能刚top看到想要生成日志时就已经处理完了。这时生成出来的日志就看不到信息。所以可以通过下面这条语句进行持续观察：

# top -H -p 1 -n 5 -b | grep "top -" -A 16 > ss1.log  && /jdk/bin/jstack -l  1 >> ss1.log