记一次linux 排坑记录 java.lang.OutOfMemoryError: unable to create new native thread

本文记录了一次线上环境中出现的java.lang.OutOfMemoryError异常排查过程,通过使用top、ps等命令定位到问题模块,发现是由于同事负责的模块持续创建线程导致的资源耗尽。

1、今天线上的环境昨天晚上上线后好好的突然出现异常

java.lang.OutOfMemoryError: unable to create new native thread 

在这里插入图片描述
2、排查问题(很奇怪的情况,因为我的模块并没有不停创建线程的情况),重启进程,还是一样的问题出现,只要发数据就会出现。
3、可能是别人的模块出现了内存异常,线程异常问题,而我的模块线程池用的是JVM的公共线程并没有自己去创建维护。
4、查看系统进程与线程上线
ulimit -a在这里插入图片描述
5、top
6、top -h
在这里插入图片描述
7、我这里是没办法重现了,因为别的同事也在排错,发现是他负责的模块不停的在创建线程,重启后就好了
7.2
1、top -H
手册中说:-H : Threads toggle
加上这个选项启动top,top一行显示一个线程。否则,它一行显示一个进程。
2、ps xH
手册中说:H Show threads as if they were processes
这样可以查看所有存在的线程。
8、参考https://www.cnblogs.com/EasonJim/p/8098217.html

### 诊断与解决 `java.lang.OutOfMemoryError: unable to create new native thread` 当 JVM 抛出 `java.lang.OutOfMemoryError: unable to create new native thread` 异常时,表示 JVM 无法为新线程分配操作系统级别的线程资源。这种错误通常发生在系统资源(尤其是内存)耗尽的情况下,而非 JVM 内存不足。JVM 创建线程时,操作系统会为每个线程分配独立的栈空间,这部分内存并不来自 JVM 的堆内存,而是从系统剩余内存中分配[^3]。 #### 常见原因分析 1. **线程数超过系统限制** 操作系统对每个用户进程可创建线程数有限制,若线程数达到上限,则无法创建线程。例如在 Linux 系统中,可以通过 `ulimit -u` 查看当前用户允许的最大线程数(或进程数)。 2. **线程栈大小设置过高** 每个线程默认分配的栈空间大小(由 JVM 参数 `-Xss` 控制)直接影响线程数量。例如,默认 `-Xss1m` 表示每个线程分配 1MB 的栈空间。若物理内存有限,线程数将受到显著限制[^4]。 3. **JVM 堆内存设置过大** 若 `-Xmx` 设置的堆内存过大,可能导致系统剩余内存不足以支持创建线程。例如在一台 8GB 内存的服务器上,若 JVM 堆设置为 5GB,系统保留内存为 500MB,则剩余 2.5GB 用于线程栈分配,若每个线程栈为 1MB,则最多只能创建约 2500 个线程[^4]。 4. **线程泄漏或资源未释放** 若应用程序未正确释放线程资源(如未关闭线程池、未回收线程等),可能导致线程数持续增长,最终耗尽系统资源。 #### 解决方案 1. **调整线程栈大小** 适当减小线程栈大小可以显著提高可创建线程数。例如设置 `-Xss256k` 可将每个线程栈大小减少至 256KB,从而提升线程总数[^4]。 示例 JVM 启动参数: ```bash java -Xms512m -Xmx2g -Xss256k -jar your-application.jar ``` 2. **调整系统线程限制** 在 Linux 系统中,可以临时修改线程限制: ```bash ulimit -u 8192 ``` 或者在 `/etc/security/limits.conf` 中永久设置: ```conf * soft nproc 8192 * hard nproc 8192 ``` 3. **优化线程池配置** 避免无限制创建线程,使用线程池进行线程复用。例如使用 `ThreadPoolTaskExecutor` 或 `ForkJoinPool` 等机制来控制线程数量,防止线程爆炸式增长。 4. **监控与分析线程使用情况** 使用工具如 `jstack` 获取线程堆栈信息,分析线程状态,识别是否存在线程阻塞或死锁问题。 示例获取线程转储: ```bash jstack <pid> > thread_dump.log ``` 5. **检查线程泄漏** 查看线程池或任务调度器是否在任务完成后释放线程,确保所有线程最终进入终止状态。 #### 示例:线程数计算与内存分配 假设服务器总内存为 8GB,JVM 堆设置为 5GB,系统保留内存为 500MB,则剩余内存为 2.5GB。若每个线程栈为 1MB,则理论上最多可创建 2500 个线程。若线程栈设置为 256KB,则可创建线程数约为 10000 个[^4]。 --- ###
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值