再谈JVM中可生成的最大Thread数量

最新推荐文章于 2025-01-21 17:32:47 发布

和蜗牛比赛coding

最新推荐文章于 2025-01-21 17:32:47 发布

阅读量2.1k

点赞数

CC 4.0 BY-SA版权

文章标签： java thread oom

本文链接：https://blog.youkuaiyun.com/tzjzrq/article/details/82221073

当在suse 12 sp3服务器上运行多个Java进程时，遇到""java.lang.OutOfMemoryError: unable to create new native thread""错误，即使系统内存充足。调整JVM参数如-Xms, -Xmx, -Xss以及系统参数如pid_max, thread-max, max_map_count并未解决问题。最终发现是cgroup的pids控制器在/user.slice/user-1000.slice层面对线程数进行了限制。设置pids.max为100000后，成功创建接近10W线程，解决了线程创建问题。" 110362196,10293133,图数据结构详解：邻接矩阵、邻接表与十字链表,"['数据结构', '图论', '邻接矩阵', '邻接表', '链式存储']

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一台suse 12 sp3服务器上起多个java进程，突然遇到“ java.lang.OutOfMemoryError: unable to create new native thread“的报错，而服务器本身仍然有大量free的内存，baidu之，几乎所有的文章都会提到下面几个jvm和操作系统参数：

1、Java虚拟机本身：-Xms，-Xmx，-Xss；

2、系统限制：/proc/sys/kernel/pid_max，/proc/sys/kernel/thread-max，max_user_process（ulimit -u），/proc/sys/vm/max_map_count

详细内容请参考：JVM中可生成的最大Thread数量

很不幸，在服务器上进行了上述参数配置，还是会遇到OOM报错，启动java进程，运行top -H 查看系统的线程总数，最高在12250左右，然后，日志报错：”unable to create new native thread“。同时，查看系统message的日志(/var/log/message)发现如下信息：

kernel: cgroup: fork rejected by pids controller in /user.slice/user-1000.slice

经过研究，发现cgroup通过/sys/fs/cgroup/pids/user.slice/user-1000.slice/pids.max控制当前登录用户（uid为1000）启动的线程总数，执行echo 100000 > pids.max后，运行如下代码可以创建接近10W的线程，至此，问题解决。

最后，总结列出所有相关的jvm和操作系统参数

-Xms(intial java heap size)

-Xmx(maximum java heap size)

-Xss(the stack size for each thread)

/proc/sys/kernel/pid_max

/proc/sys/kernel/thread-max

max_user_process（ulimit -u）

/proc/sys/vm/max_map_count

/sys/fs/cgroup/pids/user.slice/user-1000.slice/pids.max

import java.util.ArrayList;
import java.util.List;

public class MaxThreadsMain {

  public static final int BATCH_SIZE = 4000;

  public static void main(String... args) throws InterruptedException {
    List<Thread> threads = new ArrayList<Thread>();
    try {
      for (int i = 0; i <= 100 * 1000; i += BATCH_SIZE) {
        long start = System.currentTimeMillis();
        addThread(threads, BATCH_SIZE);
        long end = System.currentTimeMillis();
        Thread.sleep(1000);
        long delay = end - start;
        System.out.printf("%,d threads: Time to create %,d threads was %.3f seconds %n", threads.size(), BATCH_SIZE, delay / 1e3);
      }
    } catch (Throwable e) {
      System.err.printf("After creating %,d threads, ", threads.size());
      e.printStackTrace();
    }

  }

  private static void addThread(List<Thread> threads, int num) {
    for (int i = 0; i < num; i++) {
      Thread t = new Thread(new Runnable() {
        @Override
        public void run() {
          try {
            while (!Thread.interrupted()) {
              Thread.sleep(1000);
            }
          } catch (InterruptedException ignored) {
            //
          }
        }
      });
      t.setDaemon(true);
      t.setPriority(Thread.MIN_PRIORITY);
      threads.add(t);
      t.start();
    }
  }
}