JVM内存机制与常见问题排查

简介: Java内存模型:Java Memory Model,简称JMM。 整体上,JVM内存包含堆内存和线程栈内存,原始数据类型和对象引用在栈内存上,对象(及其成员变量)、静态变量都在堆内存上。堆内存上的所有对象,可以被所有线程拿到,属于共享区域。大部分时候,我们处理的都是堆内存上的问题。

Java内存模型:Java Memory Model,简称JMM。整体上,JVM内存包含堆内存和线程栈内存,原始数据类型和对象引用在栈内存上,对象(及其成员变量)、静态变量都在堆内存上。堆内存上的所有对象,可以被所有线程拿到,属于共享区域。大部分时候,我们处理的都是堆内存上的问题。

JVM堆内存.png

JVM的GC(垃圾回收)采用分代机制,即堆内存分为年轻代、老年代,年轻代里面继续分三块:新生代(Eden-Space)、两个存活区(S0、S1)。GC的大致过程是:创建对象时会在Eden区分配内存,GC的时Eden区和S区(S0和S1中非空的那个)中存活的对象复制到另外一个空的S区。S0和S1在任何时候都有一个空区域专门存储被年轻代GC后仍然存活的对象,这批对象在S0和S1中来回复制多次,最终达到一定存活时间的对象,被移到老年代。

在默认情况下,Eden:S0:S1的内存分配比例是:8:1:1。之所以来回复制,主要是为了解决GC后的内存碎片问题。

JVM采用的GC算法是:标记清除算法(Mark and Sweep)。

  1. 标记:会遍历所有可达对象,这个阶段会让所有应用程序的线程暂停,导致STW停顿问题(Stop The
    World);
  2. 清除:不可达对象占用的内存被回收,以便重用;

JVM调优,很大程度上是GC的调优,下面我们先看看GC相关的知识点。为了方便后面做演示,我们新建一个Java工程(过程略)。

我们可以先来一段耗内存的代码:

List<Order> orderList=new ArrayList<>();
   while(true){
   Order order=new Order();
   order.setId(1);
   order.setName("Java In Action");
   order.setPrice(20.5);
   orderList.add(order);
   System.out.println( "Hello World!"+order);
  }

工程建议加上以下依赖,演示的时候会达成jar包,并用命令行执行:

<plugins>
      <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-jar-plugin</artifactId>
        <configuration>
          <archive>
            <manifest>
              <mainClass>com.learn.performance.MainApp</mainClass>
            </manifest>
          </archive>
        </configuration>
      </plugin>
    </plugins>

打包之后,在Linux上启动运行,笔者这里采用CentOS。下面我们看看怎么查看GC信息。

首先使用jps查看当前进程ID:
jps.png

然后使用jstat查看GC情况:

jstat -gcutil 进程ID 间隔时间

gc.jpg

解释:

S0: 新生代中Survivor space 0区已使用空间的百分比

S1: 新生代中Survivor space 1区已使用空间的百分比

E: 新生代已使用空间的百分比

O: 老年代已使用空间的百分比

M: 永久带已使用空间的百分比

YGC: 从应用程序启动到当前,发生Yang GC 的次数

YGCT: 从应用程序启动到当前,Yang GC所用的时间

FGC: 从应用程序启动到当前,发生Full GC的次数

FGCT: 从应用程序启动到当前,Full GC所用的时间

GCT: 从应用程序启动到当前,用于垃圾回收的总时间

当E和O区占比一直偏大,GC频繁时,就要开始注意系统的内存问题了。前面我们也提到过,GC时,会导致系统卡顿(STW),此时就必须要考虑调优了。

使用jstat查看GC,很多时候是为了线上快速定位问题。而在实际场景中,我们通常会考虑在整个运行阶段都将GC信息打到日志里面,等到出问题后,可以让运维拉日志排查问题。

要实现这个效果,需要新增启动命令-XX:+PrintGCDetails,它可以帮助打印GC细节,然后通过-Xloggc指定GC日志的输出文件。其中%p是进程ID的占位符:

java -XX:+PrintGCDetails -Xloggc:log/gc_%p.log  -jar PerformanceDemo-1.0.jar

这样,最终会在log目录下生成gc_[进程ID].log文件。在GC文件里面,大家可以看到一些默认的配置,比如初始化堆内存、最大堆内存、GC算法(UseParallelGC)假如想知道GC发生的时间,还可以加上-XX:+PrintGCDateStamps参数。

在实际场景中,我们会在启动时指定内存参数,比如:

java -Xmn80m -Xms200m -Xmx200m  -XX:+PrintGCDetails -XX:+PrintGCDateStamps  -Xloggc:log/gc_%p.log  -jar PerformanceDemo-1.0.jar

解释:

  • -Xmn 设置年轻代大小
  • -Xms 设置初始内存,此值可以和-Xmx一样
  • -Xmx 设置JVM最大可用内存

启动后,我们可以使用jmap命令查看内存使用情况:

jmap -heap 进程id

jmap.png

一旦发现堆内存占用比过大时,我们就需要搞清楚到底是哪些对象导致的,此时可以继续使用jmap命令来查看存活对象数量和大小:

jmap -histo:live 进程ID > jmapinfo

此时会把存活对象信息打到jmapinfo这个文件里面,我们可以打开文件看下:

heaplive.jpg

可以很明显看出,我们自定义的Order对象是最多的(Double作为Order的属性之一)。这实际上就是调优的依据之一。

当系统真正出现OOM的时候,可能就直接挂了,这个时候我们是没办法使用jmap命令的,那怎么办呢?在生产环境中,我们通常会做OOM后生产内存dump文件的配置,新增的命令参数如下:

-XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=log/heapdump.hprof

此时一旦OOM,会自动将当时的内存信息打到heapdump.hprof文件中,我们可以下载到本地,使用JDK自带的jvisualvm工具打开查看,效果如下:

jdump.jpg

目录
相关文章
|
26天前
|
存储 缓存 Java
金石原创 |【JVM盲点补漏系列】「并发编程的难题和挑战」深入理解JMM及JVM内存模型知识体系机制(1)
金石原创 |【JVM盲点补漏系列】「并发编程的难题和挑战」深入理解JMM及JVM内存模型知识体系机制(1)
34 1
|
1月前
|
监控 安全 算法
深入理解操作系统的内存管理机制
【2月更文挑战第30天】 本文旨在探讨操作系统中至关重要的一环——内存管理。与传统摘要不同,本文将直接点出核心议题:操作系统是如何通过复杂的数据结构和算法实现对计算机内存的有效管理和优化。文章将详细阐述内存管理的关键组成部分,包括内存分配、虚拟内存技术、分页和段机制等,并探讨它们如何共同协作以支持多任务处理和保护系统安全。通过对这些机制的深入了解,读者可以更好地把握操作系统设计之精髓及对现代计算环境的深远影响。
|
26天前
|
缓存 Java C#
【JVM故障问题排查心得】「Java技术体系方向」Java虚拟机内存优化之虚拟机参数调优原理介绍(一)
【JVM故障问题排查心得】「Java技术体系方向」Java虚拟机内存优化之虚拟机参数调优原理介绍
73 0
|
7天前
|
存储 算法 数据安全/隐私保护
深入理解操作系统的内存管理机制
【4月更文挑战第17天】 在现代计算机系统中,操作系统扮演着资源管理者的角色,其中内存管理是其核心职能之一。本文探讨了操作系统内存管理的关键技术,包括虚拟内存、物理内存分配与回收、分页和分段机制,以及内存交换技术。通过分析这些机制的原理和实现,我们旨在加深读者对操作系统如何有效管理和保护内存资源的理解。
9 1
|
9天前
|
监控 Java 关系型数据库
JVM工作原理与实战(十三):打破双亲委派机制-线程上下文类加载器
JVM作为Java程序的运行环境,其负责解释和执行字节码,管理内存,确保安全,支持多线程和提供性能监控工具,以及确保程序的跨平台运行。本文主要介绍了打破双亲委派机制的方法、线程上下文类加载器等内容。
12 2
|
9天前
|
算法
深入理解操作系统的内存管理机制
【4月更文挑战第15天】 本文将探讨操作系统中至关重要的一环——内存管理。不同于通常对内存管理概念的浅尝辄止,我们将深入研究其核心原理与实现策略,并剖析其对系统性能和稳定性的影响。文章将详细阐述分页系统、分段技术以及它们在现代操作系统中的应用,同时比较它们的效率与复杂性。通过本文,读者将获得对操作系统内存管理深层次工作机制的洞见,以及对设计高效、稳定内存管理系统的理解。
|
12天前
|
存储 前端开发 安全
JVM内部世界(内存划分,类加载,垃圾回收)(上)
JVM内部世界(内存划分,类加载,垃圾回收)
46 0
|
17天前
|
存储 算法 安全
深度解析JVM世界:JVM内存分配
深度解析JVM世界:JVM内存分配
|
20天前
|
缓存 监控 算法
深入理解操作系统的内存管理机制
【4月更文挑战第5天】 随着现代计算机系统的发展,操作系统的内存管理已成为确保系统高效稳定运行的关键因素。本文旨在探讨操作系统中内存管理的基本原理、关键技术及其在实际应用中的优化策略。通过分析内存分配、虚拟内存技术以及内存保护和分页机制等方面,揭示内存管理对提升系统性能的重要性,并提供了一系列优化内存使用效率的方法。
|
21天前
|
存储 算法 开发者
深入理解操作系统的内存管理机制
【4月更文挑战第3天】 本文旨在探讨操作系统中至关重要的一环——内存管理。不同于常规的技术分析文章,我们将从宏观和微观两个维度来剖析内存管理的核心原理及其对系统性能的影响。通过深入研究分页、分段以及虚拟内存等关键技术,我们揭示了操作系统如何优化资源分配,实现多任务并发执行的同时保证系统的稳定与高效。本文不仅适用于计算机科学专业的学者和学生,同时也为软件开发者提供了宝贵的参考,帮助他们设计出更高效的程序。