第一章 JAVA内部区域与内存溢出异常

简介: 一、前言 一直以来都要看看看这本书《深入理解JAVA虚拟机》,所以找机会记录下来,以备不时之需,供看客借鉴。

一、前言

一直以来都要看看看这本书《深入理解JAVA虚拟机》,所以找机会记录下来,以备不时之需,供看客借鉴。2017年10月16日10:16:02

二、虚拟机内存划分

科普一下,内存是计算机分配的一段空间(可以理解为一段用01表示的数据长度)。java 虚拟机运行时的内存如下。

         
        图示说明:白色模块为线程隔离、金色模块为所有线程共享

       2.1 程序计数器

              program Count Register 是一块 较小的内存空间,可以看作当前线程所执行的字节码的 行号指示器
             如果正在执行一个Java方法,计数器记录的是正在执行的虚拟机字节码指令的地址;如果正在执行一个Native方法,这个计数器值为空(Undefined)。
    计数器区域没有OutOfMemory。   

 2.2 Java虚拟机栈

Java Virtual Machine Stacks 生命周期与线程相同。虚拟机栈描述的是Java方法执行的内存模型:每个方法在执行的同时都会创建一个帧栈(Stack Frame),用于存储
局部变量表(基本类型、对象引用、returnAddress)、操作数栈、动态链接、方法出口 等信息。每个方法从调用到执行完成的过程,对应一个帧栈在虚拟机栈中的入栈到出栈的过程。
            StackOverflowError情况:线程请求的栈深度大于虚拟机允许的深度。
   OutOfMemory情况:虚拟机栈无法申请足够内存。

  2.3 本地方法栈

        Native Method Stack 为虚拟机中使用到的Native方法服务。在HotSpot中虚拟机栈与本地方法栈已经合二为一。
         StackOverflowError情况:线程请求的栈深度大于虚拟机允许的深度。
OutOfMemory情况:虚拟机栈无法申请足够内存。

 2.4 Java堆

         Java Heap是Java 虚拟机管理的内存中 最大的一块,在虚拟机启动时创建。Java堆的目的就是 存放对象实例,此区域是垃圾回收的主要区域。

HotSpot JVM把年轻代分为了三部分:1个Eden区和2个Survivor区(分别叫from和to)。默认比例为8:1

         Java Heap 的可扩展实现(通过-Xmx和 -Xms控制)
          OutOfMemory情况:在Java 堆中没有内存完成实例分配。

2.5 方法区

Method Area用于存储已被虚拟机加载的 类信息、常量、静态变量、即时编译器编译后的代码等数据。作为Java堆的逻辑部分,称之为Non-Heap(非堆),“永久代”。
此区域还包括:运行时常量池(运行期间产生的常量)。��栗子:String类的intern()方法;
OutOfMemory情况:在Java 堆中没有内存完成实例分配。

2.6 其他区域

2.5.1 直接内存:通过DirectByteBuffer对象作为这块内存的的引用进行操作。NIO直接操作Native分配堆外内存。
     OutOfMemory情况:物理内存总和大于系统限制等(32位系统最大为4G)。

三、Hotspot虚拟机

3.1 对象创建

3.2 对象内存分布

对象在内存中分为3块区域:对象头(Header)、实例数据(Instance Data)和对齐填充(Padding)。
对象头:自身运行是的数据+类型指针。
存储内容                     标志位 状态    
对象哈希码、对象分带年龄 01 未锁定

3.3 对象的访问定位

对象访问定位:句柄访问(稳定)、指针访问(快)。可以理解为句柄访问的引用,指针访问的是直接地址。Hotspot采用指针访问对象。

四、OutOfMemoryError实例

在Debug/Run中设置虚拟机参数:参考Hotspot
-verbose:gc  -Xms20M -Xmx20M -Xmn10M -XX:+PrintGCDetails -XX:SurvivorRatio=8	

4.1 Java堆溢出

Java堆是保持对象实例,不断的创建对象,保证Gc Roots有可达路径来避免清除对象。
代码示例:
/**
 * VM args: -Xms20m -Xmx20m -XX:HeadDumpOnOutofMemoryError
 * @author ycy
 *
 */
public class HeapOOM {
	public static void main(String[] args) {
		List<String> testList=new ArrayList<>();
	while(true) {
		testList.add("ddddd");
	}
	}
}
出错信息:


内存泄露总体分析预览:

堆异常优化: 借鉴内存优化
实际错误例子

public static List<Object> list;

在项目中不断在list增加数据,进行操作,


4.2 虚拟机栈和本地方法栈溢出

栈存储局部变量表、操作数等,那么只要不断增加数据一直到内存溢出就可以实现。

示例代码:
package com.ycy.java.outofmermory;
/**
 * vm args: -Xss 128k
 * @author ycy
 *产生原因:堆栈空间太小、内存不足
 */
public class JavaStackSOF {
	//初始化堆栈长度为1
	private int stackLength=1;
	//堆栈溢出方法
	public void stackLeak() {
		stackLength++;
		stackLeak();
	}
	public static void main(String[] args) {
		JavaStackSOF oom=new JavaStackSOF();
		try {
			oom.stackLeak();
		}catch(Throwable e){
			System.out.println("stackLength:"+oom.stackLength);
			throw e;
		}
		
	}
}
出错信息:
实验结果:无论是堆帧太大还是虚拟机栈容量小,都会报Stack OverflowError异常。
Jvm默认大多数情况下帧的大小在1000到2000完全没得问题,正常的递归完全没得问题。---可以通过减少最大的堆和栈容量来解决部门“内存溢出”。

4.3 方法区和运行时常量池溢出

运行时常量池是方法区的一部分。
通过-XX:PermSzie和-XX:MaxPermSzie限制方法区的大小。是我们的永久代大小。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
package  com.paddx.test.memory;
 
import  java.util.ArrayList;
import  java.util.List;
 
public  class  StringOomMock {
     static  String  base =  "string" ;
     public  static  void  main(String[] args) {
         List<String> list =  new  ArrayList<String>();
         for  ( int  i= 0 ;i< Integer.MAX_VALUE;i++){
             String str = base + base;
             base = str;
             list.add(str.intern());
         }
     }
}

这段程序以2的指数级不断的生成新的字符串,这样可以比较快速的消耗内存。我们通过 JDK 1.6、JDK 1.7 和 JDK 1.8 分别运行:

JDK 1.6 的运行结果:

JDK 1.7的运行结果:

JDK 1.8的运行结果:

  



4.4 JDK 1.8元空间Metaspace

元空间与方法区相似,但是存在与直接内存中.
为什么出现Metaspace:
       1、字符串存在永久代中,容易出现性能问题和内存溢出。
  2、类及方法的信息等比较难确定其大小,因此对于永久代的大小指定比较困难,太小容易出现永久代溢出,太大则容易导致老年代溢出。
  3、永久代会为 GC 带来不必要的复杂度,并且回收效率偏低。
  4、Oracle 可能会将HotSpot 与 JRockit 合二为一
结果:

1、符号引用(Symbols)转移到了native heap; 例子:com.ycy.test

2、字面量(interned strings)转移到了java heap; 例子: string.intern()

3、类的静态变量(class statics)转移到了java heap 例子:Class元


-XX:MetaspaceSize,初始空间大小,达到该值就会触发垃圾收集进行类型卸载,同时GC会对该值进行调整:如果释放了大量的空间,就适当降低该值;如果释放了很少的空间,那么在不超过MaxMetaspaceSize时,适当提高该值。
  -XX:MaxMetaspaceSize,最大空间,默认是没有限制的。
  除了上面两个指定大小的选项以外,还有两个与 GC 相关的属性:
  -XX:MinMetaspaceFreeRatio,在GC之后,最小的Metaspace剩余空间容量的百分比,减少为分配空间所导致的垃圾收集
  -XX:MaxMetaspaceFreeRatio,在GC之后,最大的Metaspace剩余空间容量的百分比,减少为释放空间所导致的垃圾收集
实例代码:
package com.ycy.java.outofmermory;

import java.util.ArrayList;
import java.util.List;

/**
 * vm args: 
 * 	-XX:MetaspaceSize=10M 
	-XX:MaxMetaspaceSize=10M
	-XX:PermSize=10M -XX:MaxPermSize=10M 
 * tips:在jdk8中已经不会报permGen space 错误,因为1.8的jdk中已经没有永久代,而是报java heap space
 * @author ycy
 *
 */
public class RuntimeContantPoolOOM {
	static String  base = "string";
	public static void main(String[] args) {
		
		//使用List 保持着常量池的引用,避免Full Gc 回收常量池行为
		List<String> list=new ArrayList<>();
		int i=0;
		while(true) {
			String str = base + base;
            base = str;
            list.add(str.intern());
		}
	}
}
输出结果:


实际例子:
package com.ycy.java.outofmermory;

import org.springframework.cglib.proxy.Enhancer;
import org.springframework.cglib.proxy.MethodInterceptor;
import org.springframework.cglib.proxy.MethodProxy;

import java.lang.reflect.Method;
/**
 * -XX:MetaspaceSize=2M 
-XX:MaxMetaspaceSize=2M
-XX:PermSize=10M -XX:MaxPermSize=10M
 * @author ycy
 *
 */
public class JavaMethodAreaOOM {
	  public static void main(final String[] args) {
		
		  while(true) {
			  Enhancer enhancer=new Enhancer();
			  //设置需要创建子类的类
			  enhancer.setSuperclass(OOMObject.class);
			  enhancer.setUseCache(false);
			  //通过字节码技术动态创建子类实例
			  enhancer.setCallback(new MethodInterceptor() {
				  
				  @Override
				  public Object intercept(Object o, Method method, Object[] objects, MethodProxy methodProxy) throws Throwable {
					  return methodProxy.invokeSuper(objects,args);
				  }
			  });
			  
		  }
	    }
	    static class OOMObject{}
}

执行结果:

4.5 本机直接内存溢出

默认与Jave heap一样的最大值。
示例代码
/**
 * VM Args:-Xms20m -Xmx20m -XX:MaxDirectMemorySize=10m
 * @author ycy
 *
 */
import sun.misc.Unsafe;
import java.lang.reflect.Field;
public class DirectMemoryOOM {
	private static final int _1MB=1024*1024;

    public static void main(String[] args) throws Exception {
        Field unfield= Unsafe.class.getDeclaredFields()[0];
        unfield.setAccessible(true);
        Unsafe unsafe=(Unsafe)unfield.get(null);
        while (true){
            unsafe.allocateMemory(_1MB);
        }
    }
}

错误信息:

出现症状:一般OOM溢出但是,Dump文件很小,也使用了nio可以回出现这个问题。

4.6 出现内存异常一般情况

   出现内存溢出一般情况
1.内存中加载的数据量过大。
 比如一次性从数据库加载过多的数据。
2.并发数量太高。
 并发数量太高,导致在短时间内创建大量的对象,GC也不及回收。
3.集合类中有无用对象的引用,使用完后没有立即清除。
 集合类中的对象,如果不手动进行清除,GC不是不会对集合中无用的对象进行回收。
4.代码中存在死循环,递归,或者循环次数过多产生大量的对象。
5.方法区内存溢出。
 方法区存放的是Class类型信息,类名,常量池,修饰符,方法描述等信息。
 使用了过多的静态变量。常量池也被大量的占用。
 jvm在“运行期间” 产生了大量的类。导致填满了方法区。比如使用反射,动态代理,字节码生成技术会在运行期间产生大量的类和类型信息。如hibernate,spring第三方框架大量使用了cglib技术产生大量的动态类。
 大量的jsp在编译生成java类时也有可能产生方法区溢出,GC对方法区的回收非常苛刻的,因为对于一个类的回收条件就很严格。
6.启动时JVM内存参数设置过小。



目录
相关文章
|
14天前
|
存储 缓存 算法
JVM简介—1.Java内存区域
本文详细介绍了Java虚拟机运行时数据区的各个方面,包括其定义、类型(如程序计数器、Java虚拟机栈、本地方法栈、Java堆、方法区和直接内存)及其作用。文中还探讨了各版本内存区域的变化、直接内存的使用、从线程角度分析Java内存区域、堆与栈的区别、对象创建步骤、对象内存布局及访问定位,并通过实例说明了常见内存溢出问题的原因和表现形式。这些内容帮助开发者深入理解Java内存管理机制,优化应用程序性能并解决潜在的内存问题。
JVM简介—1.Java内存区域
|
13天前
|
SQL Java 中间件
【YashanDB知识库】yasdb jdbc驱动集成BeetISQL中间件,业务(java)报autoAssignKey failure异常
在BeetISQL 2.13.8版本中,客户使用batch insert向yashandb表插入数据并尝试获取自动生成的sequence id时,出现类型转换异常。原因是beetlsql在prepareStatement时未指定返回列,导致yashan JDBC驱动返回rowid(字符串),与Java Bean中的数字类型tid不匹配。此问题影响业务流程,使无法正确获取sequence id。解决方法包括:1) 在batchInsert时不返回自动生成的sequence id;2) 升级至BeetISQL 3,其已修正该问题。
【YashanDB知识库】yasdb jdbc驱动集成BeetISQL中间件,业务(java)报autoAssignKey failure异常
|
7天前
|
Java 数据库
【YashanDB知识库】kettle同步大表提示java内存溢出
在数据导入导出场景中,使用Kettle进行大表数据同步时出现“ERROR:could not create the java virtual machine!”问题,原因为Java内存溢出。解决方法包括:1) 编辑Spoon.bat增大JVM堆内存至2GB;2) 优化Kettle转换流程,如调整批量大小、精简步骤;3) 合理设置并行线程数(PARALLELISM参数)。此问题影响所有版本,需根据实际需求调整相关参数以避免内存不足。
|
13天前
|
SQL druid Oracle
【YashanDB知识库】yasdb jdbc驱动集成druid连接池,业务(java)日志中有token IDENTIFIER start异常
客户Java日志中出现异常,影响Druid的merge SQL功能(将SQL字面量替换为绑定变量以统计性能),但不影响正常业务流程。原因是Druid在merge SQL时传入null作为dbType,导致无法解析递归查询中的`start`关键字。
|
26天前
|
存储 IDE Java
java设置栈内存大小
在Java应用中合理设置栈内存大小是确保程序稳定性和性能的重要措施。通过JVM参数 `-Xss`,可以灵活调整栈内存大小,以适应不同的应用场景。本文介绍了设置栈内存大小的方法、应用场景和注意事项,希望能帮助开发者更好地管理Java应用的内存资源。
37 4
|
1月前
|
Java 程序员 开发者
Java社招面试题:一个线程运行时发生异常会怎样?
大家好,我是小米。今天分享一个经典的 Java 面试题:线程运行时发生异常,程序会怎样处理?此问题考察 Java 线程和异常处理机制的理解。线程发生异常,默认会导致线程终止,但可以通过 try-catch 捕获并处理,避免影响其他线程。未捕获的异常可通过 Thread.UncaughtExceptionHandler 处理。线程池中的异常会被自动处理,不影响任务执行。希望这篇文章能帮助你深入理解 Java 线程异常处理机制,为面试做好准备。如果你觉得有帮助,欢迎收藏、转发!
134 14
|
1月前
|
缓存 Java 应用服务中间件
java语言后台管理若依框架-登录提示404-接口异常-系统接口404异常如何处理-登录验证码不显示prod-api/captchaImage 404 (Not Found) 如何处理-解决方案优雅草卓伊凡
java语言后台管理若依框架-登录提示404-接口异常-系统接口404异常如何处理-登录验证码不显示prod-api/captchaImage 404 (Not Found) 如何处理-解决方案优雅草卓伊凡
216 5
|
1月前
|
Java Shell 数据库
【YashanDB 知识库】kettle 同步大表提示 java 内存溢出
【问题分类】数据导入导出 【关键字】数据同步,kettle,数据迁移,java 内存溢出 【问题描述】kettle 同步大表提示 ERROR:could not create the java virtual machine! 【问题原因分析】java 内存溢出 【解决/规避方法】 ①增加 JVM 的堆内存大小。编辑 Spoon.bat,增加堆大小到 2GB,如: if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms512m" "-Xmx512m" "-XX:MaxPermSize=256m" "-
|
3月前
|
存储 监控 算法
Java内存管理的艺术:深入理解垃圾回收机制####
本文将引领读者探索Java虚拟机(JVM)中垃圾回收的奥秘,解析其背后的算法原理,通过实例揭示调优策略,旨在提升Java开发者对内存管理能力的认知,优化应用程序性能。 ####
72 0
|
27天前
|
存储 监控 Java
【Java并发】【线程池】带你从0-1入门线程池
欢迎来到我的技术博客!我是一名热爱编程的开发者,梦想是编写高端CRUD应用。2025年我正在沉淀中,博客更新速度加快,期待与你一起成长。 线程池是一种复用线程资源的机制,通过预先创建一定数量的线程并管理其生命周期,避免频繁创建/销毁线程带来的性能开销。它解决了线程创建成本高、资源耗尽风险、响应速度慢和任务执行缺乏管理等问题。
157 60
【Java并发】【线程池】带你从0-1入门线程池