线上发生java.lang.OutOfMemoryError: unable to create new native thread,排查思路。
1.进入docker容器内部
docker exec -it node-ftmp bash
2.导出线程dump文件
jstack -l <pid> > threadDump.txt
jstack -l 19 > threadDump.txt
3.退出docker环境
exit
4.拷贝dump文件到宿主机
docker cp node-ftmp:/home/fssc/node-FTMP/threadDump.txt /home
- 下载到本地分析
threadDump.txt文件有5M多,一行一行看不方便。上工具 IBM JCA
https://www.ibm.com/support/pages/ibm-thread-and-monitor-dump-analyzer-java-tmda
-
有5000多个线程为parked状态,说明代码中有大量的空闲线程。
我们可以在这个界面查看每一个线程的情况。
7.几个小时候又下载了一份线程dump文件,对比两次线程数量
- 发现以pool-为前缀的线程,增加较多,应该是线程池产生线程没有正常关闭销毁导致。后面就可以去分析代码了。