JVM频繁GC内存溢出排查

简介: GC(Garbage collection)频繁和堆内存溢出原因简单来说是对象占用堆空间难以回收,新对象无法分配触发GC或者直接导致内存溢出,最终进程结束。

前言
GC(Garbage collection)频繁和堆内存溢出原因简单来说是对象占用堆空间难以回收,新对象无法分配触发GC或者直接导致内存溢出,最终进程结束。
排查思路是先查看进程各种类型对象占用空间大小和比例,锁定占用空间较多的对象后再分析相关的程序是否有使用不当的地方。下文的侧重点是通过多种方式查看堆内存分布。
例子程序
先编译(javac FrequentFullGCSample.java)例子程序,执行下面的指令来创建JVM进程。
指定-Xms2M -Xmx2M来限制堆内存大小为 2兆,作为例子程序够用了;为了方便演示我们再加上这两个选项:-XX:+PrintCommandLineFlags打印有变动的JVM选项值;-XX:+PrintGCDetails打印垃圾回收的详细信息。
java -Xms2M -Xmx2M -XX:+PrintCommandLineFlags -XX:+PrintGCDetails FrequentFullGCSample
复制代码
import java.util.LinkedList;
import java.util.Queue;
import java.util.concurrent.TimeUnit;

public class FrequentFullGCSample {

   private static final Queue QUEUE = new LinkedList<>();

   public static void main(String[] args) throws InterruptedException {
       while (true) {
           QUEUE.offer(new Object());
           TimeUnit.MILLISECONDS.sleep(3);
      }
  }
}
复制代码
从控制台日志可以看到首先输出了部分有变动的JVM选项值:初始堆(-XX:InitialHeapSize)和最大堆(-XX:MaxHeapSize)大小都为2097152字节(B),也就是2兆(M);使用了类指针压缩(-XX:+UseCompressedClassPointers)和对象指针压缩(-XX:+UseCompressedOops)。
在后面我们可以看到输出的GC日志信息,对象先分配在年轻代,空间占满开始频繁YGC(Young garbage collection)。

经过几代回收之后,对象分代年龄增长转移到老年代,老年代空间逐渐占满开始频繁Full GC。

由于例子程序新创建的对象都是强引用类型,不能定为垃圾,无法回收。经过频繁的Full GC无果后新对象无法分配到空间,报错内存溢出(java.lang.OutOfMemoryError)。从后面打印的各个分代的内存使用情况可以看出年轻代(def new generation)和老年代(tenured generation)占用比例接近100%。

先通过jps找到我们的JVM进程ID

查看堆中对象分配信息
jmap -histo(推荐)
jmap是JDK自带的指令可以查看堆内存相关的信息。jmap -histo <Java进程ID>会列出进程中每个类型对象实例数量和占用空间大小按降序列出来,我们再加上head -10来查看前10行信息可以看到排名前几位的对象相关信息。
这种方式合适进程还在运行的时候用,统计输出的信息不多,对进程本身影响比较小。
jmap -histo 20091 | head -10
复制代码

jmap -dump + Java VisualVM
jmap -dump可以将堆内存信息以二进制的方式转储到文件,格式为jmap -dump:format=b,file=<文件名> <Java进程ID>。
这种方式转储的数据比较多,当我们的JVM堆内存使用空间比较大的时候(比如上G大小)需要一定的时间,而且转储的过程中会影响进程运行。一般不建议这样做,除非JVM配置/使用的空间比较小。
jmap -dump:format=b,file=71976.dump 71976
复制代码

有了堆转储文件,我们找一个可以分析这个文件的工具来查看,这里我们用JDK自带的JVM图形化工具Java VisualVM。

Mac在命令行输出下面命令打开

/System/Library/Frameworks/JavaVM.framework/Versions/Current/Commands/jvisualvm

Windows在JDK中bin目录下

复制代码
点击【文件】>【装入】,选择合适的类型后再选中我们的堆转储文件打开。

装入后点击类,可以在图形化界面看到当时堆中各种类的实例数和大小。

内存溢出时自动生成堆转储文件(推荐)
启动时增加一个JVM选项-XX:+HeapDumpOnOutOfMemoryError。默认文件会生成到当前目录下,名为java_pid<进程ID>.hprof,可以通过选项-XX:HeapDumpPath=<目录>生成到指定的目录。再用Java VisualVM装入查看即可。
这种方式是比较推荐的,进程已经出问题要退出了,退出前能生成信息帮助我们事后分析。
java -Xms2M -Xmx2M \
-XX:+PrintCommandLineFlags \
-XX:+PrintGCDetails \
-XX:+HeapDumpOnOutOfMemoryError FrequentFullGCSample
复制代码
Java VisualVM 远程监控
java命令中多加几个选项启用远程监控。-Djava.rmi.server.hostname填本机IP地址;-Dcom.sun.management.jmxremote.port填远程访问使用的端口;其他两个是为了关闭鉴权不校验用户名密码。
进程开启监控肯定需要额外的工作,下发数据、网络交互等等,会影响到进程的运行,所以一般不用。但是可以用在测试的时候,压力测试同时监控,便于分析。
java -Xms2M -Xmx2M -XX:+PrintCommandLineFlags -XX:+PrintGCDetails \
-Dcom.sun.management.jmxremote \
-Dcom.sun.management.jmxremote.authenticate=false \
-Dcom.sun.management.jmxremote.ssl=false \
-Dcom.sun.management.jmxremote.port=1099 \
-Djava.rmi.server.hostname=192.168.252.132 FrequentFullGCSample
复制代码
双击【远程】,填好主机地址后点【确定】。

右键点击刚刚配置出现的主机,选择【添加JMX】连接,填好端口号点【确定】。

双击刚配置的JMX连接,点击【抽样器】>【内存】可以实时看到堆内存中各种对象的分配情况。

总结
以上方式推荐的还是jmap -histo和内存溢出时自动转储,对进程本身影响比较小。
另外jmap -heap <Java进程ID>可以看堆内存相关的JVM配置和堆内存整体分配。

相关文章
|
3月前
|
Arthas 监控 Java
(十一)JVM成神路之性能调优篇:GC调优、Arthas工具详解及各场景下线上最佳配置推荐
“在当前的互联网开发模式下,系统访问量日涨、并发暴增、线上瓶颈等各种性能问题纷涌而至,性能优化成为了现时代开发过程中炙手可热的名词,无论是在开发、面试过程中,性能优化都是一个常谈常新的话题”。
213 3
|
4天前
|
存储 算法 Java
深入解析 Java 虚拟机:内存区域、类加载与垃圾回收机制
本文介绍了 JVM 的内存区域划分、类加载过程及垃圾回收机制。内存区域包括程序计数器、堆、栈和元数据区,每个区域存储不同类型的数据。类加载过程涉及加载、验证、准备、解析和初始化五个步骤。垃圾回收机制主要在堆内存进行,通过可达性分析识别垃圾对象,并采用标记-清除、复制和标记-整理等算法进行回收。此外,还介绍了 CMS 和 G1 等垃圾回收器的特点。
14 0
深入解析 Java 虚拟机:内存区域、类加载与垃圾回收机制
|
10天前
|
监控 Java Linux
redisson内存泄漏问题排查
【9月更文挑战第22天】在排查 Redisson 内存泄漏问题时,首先需确认内存泄漏的存在,使用专业工具(如 JProfiler)分析内存使用情况,检查对象实例数量及引用关系。其次,检查 Redisson 使用方式,确保正确释放资源、避免长时间持有引用、检查订阅和监听器。此外,还需检查应用程序其他部分是否存在内存泄漏源或循环引用等问题,并考虑更新 Redisson 到最新版本以修复潜在问题。
|
12天前
|
监控 算法 Java
深入理解Java中的垃圾回收机制在Java编程中,垃圾回收(Garbage Collection, GC)是一个核心概念,它自动管理内存,帮助开发者避免内存泄漏和溢出问题。本文将探讨Java中的垃圾回收机制,包括其基本原理、不同类型的垃圾收集器以及如何调优垃圾回收性能。通过深入浅出的方式,让读者对Java的垃圾回收有一个全面的认识。
本文详细介绍了Java中的垃圾回收机制,从基本原理到不同类型垃圾收集器的工作原理,再到实际调优策略。通过通俗易懂的语言和条理清晰的解释,帮助读者更好地理解和应用Java的垃圾回收技术,从而编写出更高效、稳定的Java应用程序。
|
2月前
|
存储 算法 Java
JVM自动内存管理之垃圾收集算法
文章概述了JVM内存管理和垃圾收集的基本概念,提供一个关于JVM内存管理和垃圾收集的基础理解框架。
JVM自动内存管理之垃圾收集算法
|
2月前
|
存储 Java 程序员
JVM自动内存管理之运行时内存区
这篇文章详细解释了JVM运行时数据区的各个组成部分及其作用,有助于理解Java程序运行时的内存布局和管理机制。
JVM自动内存管理之运行时内存区
|
2月前
|
存储 安全 Java
JVM常见面试题(二):JVM是什么、由哪些部分组成、运行流程,JDK、JRE、JVM关系;程序计数器,堆,虚拟机栈,堆栈的区别是什么,方法区,直接内存
JVM常见面试题(二):JVM是什么、由哪些部分组成、运行流程是什么,JDK、JRE、JVM的联系与区别;什么是程序计数器,堆,虚拟机栈,栈内存溢出,堆栈的区别是什么,方法区,直接内存
JVM常见面试题(二):JVM是什么、由哪些部分组成、运行流程,JDK、JRE、JVM关系;程序计数器,堆,虚拟机栈,堆栈的区别是什么,方法区,直接内存
|
2月前
|
JavaScript Java 开发工具
Electron V8排查问题之接近堆内存限制的处理如何解决
Electron V8排查问题之接近堆内存限制的处理如何解决
112 1
|
2月前
|
算法 Java 应用服务中间件
探索JVM垃圾回收算法:选择适合你应用的最佳GC策略
探索JVM垃圾回收算法:选择适合你应用的最佳GC策略
|
2月前
|
存储 监控 算法
深入解析JVM内部结构及GC机制的实战应用
深入解析JVM内部结构及GC机制的实战应用