8 种 Java- 内存溢出之五 -Unable to create new native thread

简介: 8 种 Java- 内存溢出之五 -Unable to create new native thread

5.1 Unable to create new native thread

Java 应用一般是多线程的. 这意味着在用 Java 写的程序 (似乎) 可以在同时做多件事情. 例如 – 即使机器只有一个处理器 – 当你把内容从一个窗口拖动到另一个, 在后台播放的电影不会停止因为您一次执行了几个操作.

思考线程的一种方法是将它们视为可供提交任务的工作人员. 如果你只有一名员工, 他 / 她只能同时做一个任务. 但是当你有一打员工供你差遣, 他们可以同时完成你的几个要求.

现在, 就像在现实世界的员工, 在 JVM 里的线程也需要一些空间来开展他们被传唤去要处理的工作. 当线程数超过了这个内存空间的限制的时候, 我们就会碰到下边的问题:

这个消息:java.lang.OutOfMemoryError: Unable to create new native thread 意味着Java 应用已经达到它可以运行的线程数的上限.

5.2 原因

只要 JVM 向 OS 申请新线程, 你都有机会碰到 java.lang.OutOfMemoryError: Unable to create new native thread. 只要下面的 OS 不能再分配一个新的 native thread, 这个 OutOfMemoryError 会被抛出. 准确的 native thread 限制与对应的平台有关, 因此, 我们推荐通过运行下面的 例子 来找到这个限制. 但是, 通常, 引发 java.lang.OutOfMemoryError: Unable to create new native thread 会经过下列阶段:

  1. 运行在 JVM 里的一个应用请求一个新的 Java 线程
  2. JVM native 代码传递要创建一个新的 native 线程到 OS
  3. OS 尝试创建一个新的 native 线程, 同时需要分配内存给这个线程
  4. OS 将会拒绝本地内存分配, 可能是因为 32-bit Java 进程大小已经耗尽了它的内存地址区域 – 如: 达到了 2-4GB 的进程大小限制 – 或是这个 OS 的虚拟内存已经被耗尽
  5. 抛出 java.lang.OutOfMemoryError: Unable to create new native thread 错误.

5.3 示例

下列例子循环启动和创建新的线程. 当运行这段代码, 操作系统会迅速达到限制, 显示出 java.lang.OutOfMemoryError: Unable to create new native thread 消息.

while (true) {
    new Thread(new Runnable()) {
        public void run() {
            try {
                Thread.sleep(10000000);
            } catch (InterruptedException e) { }
        }
    }}.start();
}
JAVA

确切的 native thread 限制与平台有关, 如在 Windows, Linux 和 Mac OS X 上测试结果如下:

  • 64-bit Mac OS X 10.9, Java 1.7.0_45 – JVM 在创建 2031 个线程后死掉
  • 64-bit Ubuntu Linux, Java 1.7.0_45 – JVM 在创建 31893 个线程后死掉
  • 64-bit Windows 7, Java 1.7.0_45 – 因为这个 OS 使用了一个不同的线程模型, 在这个平台上似乎没有抛出该错误. 在线程达到 250,000 后, 进程仍然存活, 尽管 swap 区已经使用了 10GB, 同时应用面临非常严重的性能问题.

所以, 在引入一个小测试时前, 确保你知道你的电脑的限制, 来发现什么时候 java.lang.OutOfMemoryError: Unable to create new native thread 会被触发.

5.4 解决方案

有时候, 你可以通过增加 OS 层面的限制来绕过这个 Unable to create new native thread 问题. 例如, 如果你限制了 JVM 在 user space 可以生成的max user processes, 那么你应该检查并尝试增大这个限制:

[root@dev ~]# ulimit -a
core file size          (blocks, -c) 0
--- cut for brevity ---
max user processes              (-u) 1800
SHELL

通常情况下,因为本机达到线程的限制而抛出 OutOfMemoryError 错误提示可能表明有编程错误. 当你的应用生成了上千个线程, 很有可能有些地方出了大问题 – 没有太多的应用程序可以从如此大量的线程中获益(线程过多, 过犹不及)。

解决这个问题的一个办法是做线程快照 (thread dump) 来理解这个场景. 你可能会花费好几天做这个事情. 这时候, 联系我就是最好的方式(@ ̄ー ̄@).

相关文章
|
Java 数据库
【YashanDB知识库】kettle同步大表提示java内存溢出
在数据导入导出场景中,使用Kettle进行大表数据同步时出现“ERROR:could not create the java virtual machine!”问题,原因为Java内存溢出。解决方法包括:1) 编辑Spoon.bat增大JVM堆内存至2GB;2) 优化Kettle转换流程,如调整批量大小、精简步骤;3) 合理设置并行线程数(PARALLELISM参数)。此问题影响所有版本,需根据实际需求调整相关参数以避免内存不足。
|
JSON Java 关系型数据库
Java更新数据库报错:Data truncation: Cannot create a JSON value from a string with CHARACTER SET 'binary'.
在Java中,使用mybatis-plus更新实体类对象到mysql,其中一个字段对应数据库中json数据类型,更新时报错:Data truncation: Cannot create a JSON value from a string with CHARACTER SET 'binary'.
1772 4
Java更新数据库报错:Data truncation: Cannot create a JSON value from a string with CHARACTER SET 'binary'.
|
Java Shell 数据库
【YashanDB 知识库】kettle 同步大表提示 java 内存溢出
【问题分类】数据导入导出 【关键字】数据同步,kettle,数据迁移,java 内存溢出 【问题描述】kettle 同步大表提示 ERROR:could not create the java virtual machine! 【问题原因分析】java 内存溢出 【解决/规避方法】 ①增加 JVM 的堆内存大小。编辑 Spoon.bat,增加堆大小到 2GB,如: if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms512m" "-Xmx512m" "-XX:MaxPermSize=256m" "-
|
Java 网络安全 Maven
Exception in thread "main" java.lang.NoSuchMethodError: okhttp3.OkHttpClient$Builder.sslSocketFactory(Ljavax/net/ssl/SSLSocketFactory;Ljavax/net/ssl/X509TrustManager;)Lokhttp3/OkHttpClient$Builder; 问题处理
【10月更文挑战第26天】Exception in thread "main" java.lang.NoSuchMethodError: okhttp3.OkHttpClient$Builder.sslSocketFactory(Ljavax/net/ssl/SSLSocketFactory;Ljavax/net/ssl/X509TrustManager;)Lokhttp3/OkHttpClient$Builder; 问题处理
840 2
|
Java 开发者
在Java多线程编程中,创建线程的方法有两种:继承Thread类和实现Runnable接口
【10月更文挑战第20天】在Java多线程编程中,创建线程的方法有两种:继承Thread类和实现Runnable接口。本文揭示了这两种方式的微妙差异和潜在陷阱,帮助你更好地理解和选择适合项目需求的线程创建方式。
374 3
|
Java Linux Windows
Java“Could Not Create Java Virtual Machine”解决
当在Java中遇到“Could Not Create Java Virtual Machine”错误时,通常是由于内存设置不当、Java版本不兼容、类路径错误或操作系统限制等原因导致JVM无法启动。解决方法包括调整内存参数、确认Java版本兼容性、检查类路径和启动参数、以及检查用户权限和文件系统。
8059 1
|
Java
在Java多线程编程中,实现Runnable接口通常优于继承Thread类
【10月更文挑战第20天】在Java多线程编程中,实现Runnable接口通常优于继承Thread类。原因包括:1) Java只支持单继承,实现接口不受此限制;2) Runnable接口便于代码复用和线程池管理;3) 分离任务与线程,提高灵活性。因此,实现Runnable接口是更佳选择。
573 2
|
Java
Java中多线程编程的基本概念和创建线程的两种主要方式:继承Thread类和实现Runnable接口
【10月更文挑战第20天】《JAVA多线程深度解析:线程的创建之路》介绍了Java中多线程编程的基本概念和创建线程的两种主要方式:继承Thread类和实现Runnable接口。文章详细讲解了每种方式的实现方法、优缺点及适用场景,帮助读者更好地理解和掌握多线程编程技术,为复杂任务的高效处理奠定基础。
307 2
|
Java 开发者
Java多线程初学者指南:介绍通过继承Thread类与实现Runnable接口两种方式创建线程的方法及其优缺点
【10月更文挑战第20天】Java多线程初学者指南:介绍通过继承Thread类与实现Runnable接口两种方式创建线程的方法及其优缺点,重点解析为何实现Runnable接口更具灵活性、资源共享及易于管理的优势。
435 1
|
Java
Unable to obtain OffsetDateTime from TemporalAccessor: {},ISO resolved to 2024-11-26T20:55:26 of type java.time.format.Parsed
Unable to obtain OffsetDateTime from TemporalAccessor: {},ISO resolved to 2024-11-26T20:55:26 of type java.time.format.Parsed
716 0