8 种 Java - 内存溢出之五 - Unable to create new native thread

本文最后更新于:2024年7月25日 下午

5.1 Unable to create new native thread

Java 应用一般是多线程的。这意味着在用 Java 写的程序 (似乎) 可以在同时做多件事情。例如 – 即使机器只有一个处理器 – 当你把内容从一个窗口拖动到另一个,在后台播放的电影不会停止因为您一次执行了几个操作.

思考线程的一种方法是将它们视为可供提交任务的工作人员。如果你只有一名员工,他 / 她只能同时做一个任务。但是当你有一打员工供你差遣,他们可以同时完成你的几个要求.

现在,就像在现实世界的员工,在 JVM 里的线程也需要一些空间来开展他们被传唤去要处理的工作。当线程数超过了这个内存空间的限制的时候,我们就会碰到下边的问题:

这个消息:java.lang.OutOfMemoryError: Unable to create new native thread 意味着 Java 应用已经达到它可以运行的线程数的上限.

5.2 原因

只要 JVM 向 OS 申请新线程,你都有机会碰到 java.lang.OutOfMemoryError: Unable to create new native thread. 只要下面的 OS 不能再分配一个新的 native thread, 这个 OutOfMemoryError 会被抛出。准确的 native thread 限制与对应的平台有关,因此,我们推荐通过运行下面的例子来找到这个限制。但是,通常,引发 java.lang.OutOfMemoryError: Unable to create new native thread 会经过下列阶段:

  1. 运行在 JVM 里的一个应用请求一个新的 Java 线程
  2. JVM native 代码传递要创建一个新的 native 线程到 OS
  3. OS 尝试创建一个新的 native 线程,同时需要分配内存给这个线程
  4. OS 将会拒绝本地内存分配,可能是因为 32-bit Java 进程大小已经耗尽了它的内存地址区域 – 如:达到了 2-4GB 的进程大小限制 – 或是这个 OS 的虚拟内存已经被耗尽
  5. 抛出 java.lang.OutOfMemoryError: Unable to create new native thread 错误.

5.3 示例

下列例子循环启动和创建新的线程。当运行这段代码,操作系统会迅速达到限制,显示出 java.lang.OutOfMemoryError: Unable to create new native thread 消息.

1
2
3
4
5
6
7
8
9
while (true) {
new Thread(new Runnable()) {
public void run() {
try {
Thread.sleep(10000000);
} catch (InterruptedException e) { }
}
}}.start();
}

确切的 native thread 限制与平台有关,如在 Windows, Linux 和 Mac OS X 上测试结果如下:

  • 64-bit Mac OS X 10.9, Java 1.7.0_45 – JVM 在创建 2031 个线程后死掉
  • 64-bit Ubuntu Linux, Java 1.7.0_45 – JVM 在创建 31893 个线程后死掉
  • 64-bit Windows 7, Java 1.7.0_45 – 因为这个 OS 使用了一个不同的线程模型,在这个平台上似乎没有抛出该错误。在线程达到 250,000 后,进程仍然存活,尽管 swap 区已经使用了 10GB, 同时应用面临非常严重的性能问题.

所以,在引入一个小测试时前,确保你知道你的电脑的限制,来发现什么时候 java.lang.OutOfMemoryError: Unable to create new native thread 会被触发.

5.4 解决方案

有时候,你可以通过增加 OS 层面的限制来绕过这个 Unable to create new native thread 问题。例如,如果你限制了 JVM 在 user space 可以生成的 max user processes, 那么你应该检查并尝试增大这个限制:

1
2
3
4
[root@dev ~]# ulimit -a
core file size (blocks, -c) 0
--- cut for brevity ---
max user processes (-u) 1800

通常情况下,因为本机达到线程的限制而抛出 OutOfMemoryError 错误提示可能表明有编程错误。当你的应用生成了上千个线程,很有可能有些地方出了大问题 – 没有太多的应用程序可以从如此大量的线程中获益 (线程过多,过犹不及)。

解决这个问题的一个办法是做线程快照 (thread dump) 来理解这个场景。你可能会花费好几天做这个事情。这时候,联系我就是最好的方式 (@ ̄ー ̄@).

系列文章

  1. 8 种 Java 内存溢出之一:Java Heap Space
  2. 案例 1: 某财险承保系统内存泄漏问题
  3. 8 种 Java - 内存溢出之二 - GC overhead limit exceeded
  4. 案例 2: 某寿险公司核心系统 GC 开销超限问题分析
  5. 8 种 Java - 内存溢出之三 - Permgen space
  6. 案例 3: 某财险公司运行时的 Perm 区内存溢出分析
  7. 8 种 Java - 内存溢出之四 - Metaspace
  8. 8 种 Java - 内存溢出之五 - Unable to create new native thread
  9. 8 种 Java - 内存溢出六 - Out of swap space?
  10. 8 种 Java 内存溢出之七 - Requested array size exceeds VM limit
  11. 8 种 Java 内存溢出之八 - Kill process or sacrifice child

8 种 Java - 内存溢出之五 - Unable to create new native thread
https://ewhisper.cn/posts/45832/
作者
东风微鸣
发布于
2017年11月3日
许可协议