8 种 Java- 内存溢出之三 -Permgen space

简介: 8 种 Java- 内存溢出之三 -Permgen space

3.1 Permgen space 概述

Java 应用只允许使用有限的内存. 你的应用的内存大小是在启动的时候指定好的. 进一步来说, Java 内存被分成 2 个不同的区域, 如下图:

这些区域, 包括 perm 区, 会在 JVM 启动时设置. 如果你没有设置, 会使用与平台有关的默认配置.

java.lang.OutOfMemoryError: PermGen Space 消息表示 永久代 (Permgen) 内存耗尽.

3.2 原因

要理解 java.lang.OutOfMemoryError: PermGen Space 的原因, 我们需要理解这个特殊的内存区域是用来干嘛.

实际上, 永久代主要是加载和存储类声明. 包括组成类的名字和字段 (fields), 方法的字节码, 常量池信息, 对象数组和类型数组, 以及 实时编译 (Just In Time compiler) 优化.

从上边的定义, 你可以推断出 PerGen 大小需求取决于 加载的类的数量 这些类声明的大小 . 因此我们可以说, java.lang.OutOfMemoryError: PermGen Space 的主要原因是: 太多类或者太大的类被加载到永久代.

3.3 示例

3.3.1 极简案例

正如之前的描述, 永久代的使用量和加载到 JVM 里的类的数量强相关. 下列代码就是最直接的例子:

import javassist.ClassPool;
 
public class MicroGenerator {
    public static void main(String[] args) throws Exception {
        for (int i = 0;i<100_000_000;i++) {
            genetate("eu.plumbr.demo.Generated" + i);
        }
    }
 
    public static Class generate(String name) throws Exception {
        ClassPool pool = ClassPool.getDefault();
        return pool.makeClass(name).toClass();
    }
}
JAVA

在本例中,源代码在运行时循环迭代并生成类. 类 javassist 库对生成的复杂性进行了处理.

上面的代码将持续生成新的类并将其定义加载到永久代中直到该区被占满, 并且抛出java.lang.OutOfMemoryError: PermGen Space

3.3.2 重部署案例

一个更复杂和现实的例子, 我们经常会在 应用重部署 时出现 java.lang.OutOfMemoryError: PermGen Space 错误. 当你重新部署一个应用时, 您的意图是删除以前的类加载器引用的所有以前加载的类,并将其替换新的类加载器加载新版本的类。

不幸的是, 很多 第三方库 处理不当的资源 线程 , JDBC 驱动文件系统句柄 使卸载以前使用的类加载器变得不可能. 这反过来意味着: 在每次重新部署期间,您的类的前一个版本仍然驻留在 PermGen 中,在每次重新部署时生成数十 MB(甚至更多)的垃圾。

我们假设一个示例应用通过 JDBC 驱动连接到一个关系型数据库. 当应用启动时, 初始化代码加载 JDBC 驱动来连接数据库. 对应于规范,JDBC 驱动程序将自己注册到 java.sql.DriverManager。这个注册包含存储在一个静态的驱动程序管理(DriverManager) 字段中的一个驱动实例.

现在, 当应用从应用服务器卸载, java.sql.DriverManager仍然会持有那个引用. 最后,我们对驱动类进行了实时引用,而驱动类又引用了用于加载应用程序的java.lang.Classloader

java.lang.Classloader的那个实例 仍然引用这个应用的所有的类, 通常会在 Perm 区里占用数十 MB 内存 . 这也意味着: 只需几次重新部署就可以填充一个常见大小的 PermGen 并在日志中出现java.lang.OutOfMemoryError: PermGen Space 错误.

3.4 解决方案

3.4.1 解决初始化时的 OutOfMemoryError

当由于 PermGen 耗尽导致在应用运行时出现 OutOfMemoryError 错误, 解决方案很简单. 应用只需要更多的空间来加载所有类到 Perm 区, 因此我们只需要增加它的大小. 要这么做, 调整应用启动配置, 并添加 (如果有就增加)-XX:MaxPermSize 参数如下:

java -XX:MaxPermSize=512m com.yourcompany.YourClass

上述配置会告诉 JVM, Perm 区在开始报 OutOfMemoryError 之前允许增大到 512MB.

3.4.2 解决重部署时的 OutOfMemoryError

当 OutOfMemoryError 就发生在你重新部署应用之后的时候, 你的应用有 类加载器泄漏 的问题. 这时, 你应该做 heap dump 分析 - 在重部署后做这个 heap dump:

jmap -dump:format=b,file=dump.hprof <process-id>

然后用你最喜欢的 heap dump 分析工具 (Eclipse MAT 是个好工具) 打开. 在分析工具中, 你可以看 重复的类(duplicate classes), 特别是你自己的应用的. 从那里, 你需要处理所有的类加载器来找到当前活动的类加载器.

对于非活动的类加载器, 您需要通过 从非活动类加载器获取最短 GC root 路径 来确定 阻止它们来进行 gc 的引用。 有了这些信息, 你就能定位 root cause. 如果 root cause 是第三方库, 你可以通过 Google/StackOverflow 来搜索是否这是一个已知问题来获取 patch 或解决方法. 如果是你自己的代码, 你需要避免违规引用.

3.4.3 解决运行时的 OutOfMemoryError

当应用在运行时 PermGen 内存溢出, 联系我就是最好的方式(@ ̄ー ̄@).

另一种可选的, 不用联系我的方法也是可行的. 在这种情况下第一步就是要检查是否 GC 允许卸载来自 PerGen 的这些类. 一般 JVM 在这方面是相当保守的 – 类是永生不灭的. 所以一旦加载, 即使没有代码再使用它们, 它们仍然会呆在内存中. 这就会变成一个问题: 当应用创建了大量的 动态类 , 而且生成的这些类是不需要长久存在的. 在这种情况下, 允许 JVM 卸载类定义 会有所帮助. 在你的启动脚本种加入以下字段即可实现:

-XX:+CMSClassUnloadingEnabled

默认这是设为 false 的, 所以要启用这个, 你需要显示地在 Java 选项中设置下列参数. 如果你启用了CMSClassUnloadingEnabled, GC 将也会清理 PermGen, 移除不再需要使用的类. 要记住这个参数只在UseConcMarkSweepGC 也启用的时候才会生效. 所以, 当使用并行 GC, 或者, 我的天呐 – 串行 GC 时, 确保你指定你的 GC 策略到 CMS 通过:

-XX:+UseConcMarkSweepGC

如果类可以卸载, 问题仍然存在, 你应该做 heap dump 分析 – 用类似如下的命令:

jmap -dump:file=dump.hprof,format=b <process-id>

然后用你的最爱的 heap dump 分析工具 (如: Eclipse MAT) 打开这个 dump, 找到 加载最多类的类加载器 . 从这个类加载器中, 您可以继续提取加载的类,并 通过实例对这些类进行排序,以获得最大的怀疑项列表。

对于每个可疑项,您需要手工地追溯 root cause 到生成此类类的应用程序代码.

后续会有一篇我通过 Dynatrace 分析某财险公司 运行时的 Perm 区 OutOfMemoryError的案例

相关文章
|
2月前
|
存储 缓存 Java
【高薪程序员必看】万字长文拆解Java并发编程!(5):深入理解JMM:Java内存模型的三大特性与volatile底层原理
JMM,Java Memory Model,Java内存模型,定义了主内存,工作内存,确保Java在不同平台上的正确运行主内存Main Memory:所有线程共享的内存区域,所有的变量都存储在主存中工作内存Working Memory:每个线程拥有自己的工作内存,用于保存变量的副本.线程执行过程中先将主内存中的变量读到工作内存中,对变量进行操作之后再将变量写入主内存,jvm概念说明主内存所有线程共享的内存区域,存储原始变量(堆内存中的对象实例和静态变量)工作内存。
95 0
|
4月前
|
存储 缓存 算法
JVM简介—1.Java内存区域
本文详细介绍了Java虚拟机运行时数据区的各个方面,包括其定义、类型(如程序计数器、Java虚拟机栈、本地方法栈、Java堆、方法区和直接内存)及其作用。文中还探讨了各版本内存区域的变化、直接内存的使用、从线程角度分析Java内存区域、堆与栈的区别、对象创建步骤、对象内存布局及访问定位,并通过实例说明了常见内存溢出问题的原因和表现形式。这些内容帮助开发者深入理解Java内存管理机制,优化应用程序性能并解决潜在的内存问题。
242 29
JVM简介—1.Java内存区域
|
4月前
|
Java 数据库
【YashanDB知识库】kettle同步大表提示java内存溢出
在数据导入导出场景中,使用Kettle进行大表数据同步时出现“ERROR:could not create the java virtual machine!”问题,原因为Java内存溢出。解决方法包括:1) 编辑Spoon.bat增大JVM堆内存至2GB;2) 优化Kettle转换流程,如调整批量大小、精简步骤;3) 合理设置并行线程数(PARALLELISM参数)。此问题影响所有版本,需根据实际需求调整相关参数以避免内存不足。
|
5月前
|
存储 IDE Java
java设置栈内存大小
在Java应用中合理设置栈内存大小是确保程序稳定性和性能的重要措施。通过JVM参数 `-Xss`,可以灵活调整栈内存大小,以适应不同的应用场景。本文介绍了设置栈内存大小的方法、应用场景和注意事项,希望能帮助开发者更好地管理Java应用的内存资源。
254 4
|
5月前
|
Java Shell 数据库
【YashanDB 知识库】kettle 同步大表提示 java 内存溢出
【问题分类】数据导入导出 【关键字】数据同步,kettle,数据迁移,java 内存溢出 【问题描述】kettle 同步大表提示 ERROR:could not create the java virtual machine! 【问题原因分析】java 内存溢出 【解决/规避方法】 ①增加 JVM 的堆内存大小。编辑 Spoon.bat,增加堆大小到 2GB,如: if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms512m" "-Xmx512m" "-XX:MaxPermSize=256m" "-
|
7月前
|
存储 监控 算法
深入探索Java虚拟机(JVM)的内存管理机制
本文旨在为读者提供对Java虚拟机(JVM)内存管理机制的深入理解。通过详细解析JVM的内存结构、垃圾回收算法以及性能优化策略,本文不仅揭示了Java程序高效运行背后的原理,还为开发者提供了优化应用程序性能的实用技巧。不同于常规摘要仅概述文章大意,本文摘要将简要介绍JVM内存管理的关键点,为读者提供一个清晰的学习路线图。
|
7月前
|
存储 监控 算法
Java内存管理的艺术:深入理解垃圾回收机制####
本文将引领读者探索Java虚拟机(JVM)中垃圾回收的奥秘,解析其背后的算法原理,通过实例揭示调优策略,旨在提升Java开发者对内存管理能力的认知,优化应用程序性能。 ####
116 0
|
Java
Java常见内存溢出(OOM)解决方案
1,         程序计数器 一块很小的内存空间,作用是当前线程所执行的字节码的行号指示器。 2,         java栈 与程序计数器一样,java栈(虚拟机栈)也是线程私有的,其生命周期与线程相同。通常存放基本数据类型,对象引用(一个指向对象起始地址的引用指针或一个代表对象的句柄),reeturnAddress类型(指向一条字节码指令的地址) 栈区域有两种异常类型:如果
1822 0
|
Java 应用服务中间件 数据库