09-方法区

1 栈、堆、方法区的交互关系

运行时数据区结构图

从线程共享与否的角度来看

栈、堆、方法区的交互关系

2 方法区的理解

官方文档

https://docs.oracle.com/javase/specs/jvms/se8/html/jvms-2.html#jvms-2.5.4

方法区在哪里？

《Java虚拟机规范》中明确说明：“尽管所有的方法区在逻辑上是属于堆的一部分，但一些简单的实现可能不会选择去进行垃圾收集或者进行压缩。”但对于HotSpotJVM而言，方法区还有一个别名叫做Non-Heap（非堆），目的就是要和堆分开。

所以，方法区看作是一块独立于Java堆的内存空间。

方法区的基本理解

• 方法区（Method Area）与Java堆一样，是各个线程共享的内存区域。
• 方法区在JVM启动的时候被创建，并且它的实际的物理内存空间中和Java堆区一样可以是不连续的。
• 方法区的大小，跟堆空间一样，可以选择固定大小或者可拓展。
• 方法区的大小决定了系统可以保存多少个类，如果系统定义了太多的类，导致方法区溢出，虚拟机同样会抛出内存溢出错误：java.lang.OutOfMemoryError: PermGen space 或者java.lan.OutOfMemoryError: Metaspace
• 关闭JVM就会释放这个区域的内存。

Hotspot中方法区的演进

• 在JDK7及以前，习惯上把方法区，称为永久代。jdk8开始，使用了元空间取代了永久代。
• 本质上，方法区和永久代并不等价。仅是对hotspot而言的。《Java虚拟机规范》对如何实现方法区，不做统一要求。例如：BEA JRockit/ IBM J9 不存在永久代的概念。

• 现在来看，当年使用永久代不，不是好的注意。导致Java程序更容易OOM(超过-XX:MaxPermSize上限)

• 而到了JDK8,终于完成放弃了永久代的概念，改用与JRockit、J9一样在本地内存中实现的元空间（Metaspace）来替代
• 元空间的本质和永久代类似，都是对JVM规范中方法区的实现。不过元空间与永久代最大的区别在于：元空间不在虚拟机设置的内存中，而是使用本地内存。
• 永久代、元空间二者并不只是名字变了，内部结构也调整了。
• 根据《Java虚拟机规范》的规定，如果方法区无法满足新的内存分配需求时，将抛出OOM异常。

3 设置方法区大小与OOM

设置方法区的内存的大小

• 方法取的大小不必是固定的，jvm可以根据应用的需要动态调整。
• jdk7及以前：

• 通过-XX:PermSize来设置永久代初始分配空间。默认值是20.75M
• -XX:MaxPermSize来设定永久代最大可分配空间。32位机器默认是64M，64位机器模式是82M
• 当JVM加载的类信息容量超过了这个值，会报异常OutOfMemoryError:PermGebspace.

在JDK8下使用PermSize,发现不能使用

jps
jinfo -flag PermSize 23316
no such flag 'PermSize'

• jdk 8及以后

• 元数据区大小可以使用参数-XX:MetaspaceSize和-XX:MaxMetaspaceSize指定，替代上述原有的两个参数。
• 默认值依赖于平台。windows下，-XX:MetaspaceSize是21M,-XX：MaxMetaspaceSize的值是-1，即没有限制
• 与永久代不同，如果不指定大小，默认情况下，虚拟机会耗尽所有的可用系统内存。如果元数据区发生溢出，虚拟机一样会抛出异常OutOfMemoryError: Metaspace
• -XX:MetaspaceSize：设置初始的元空间大小。对于一个64位的服务器端JVM来说，其默认的-XX:MetaspaceSize值为21MB，这就是初始的高水位线，一旦触及这个水位线，Full GC将会被触发并卸载没用的类（即这些类对应的类加载器不再存活），然后这个高水位线将会重置。新的高水位线的值取决于GC后释放了多少元空间。如果释放的空间不足，那么在不超过MaxMetaspaceSize时，适当提高该值。如果释放空间过多，则适当降低该值。
• 如果初始化的高水位线设置过低，上述高水位线调整情况会发生很多次。通过垃圾回收器的日志可以观察到Full GC多次调用。为了避免频繁地GC，建议将-XX:MetaspaceSize设置为一个相对较高的值。

jinfo -flag MetaspaceSize 32180
-XX:MetaspaceSize=21807104 -- 20.79M
jinfo -flag MaxMetaspaceSize 32180
18446744073709486080

代码举例

/**
 * jdk8中
 * -XX:MetaspaceSize=10m -XX:MaxMetaspaceSize=10m
 */
public class OOMTest extends ClassLoader{
  public static void main(String[] arhs) {
    int j = 0;
    try {
      OOMTest test = new OOMTest();
      for (int i = 0; i < 10000; i++) {
        // 创建ClassWriter对象，用于生成类的二进制字节码
        ClassWriter classWriter = new ClassWriter(0);
        // 指明版本号，修饰符，类名，包名，父类，接口
        classWriter.visit(Opcodes.V1_8, Opcodes.ACC_PUBLIC, "Class" + i, null,"java/lang/Object",null);
        // 返回byte[]
        byte[] code = classWriter.toByteArray();
        // 类的加载
        // Class对象
        test.defineClass("Class" + i, code, 0, code.length);
        j++;
      }
    } finally {
      System.out.println(j);
    }
  }
}

结果

8531
Exception in thread "main" java.lang.OutOfMemoryError: Metaspace
  at java.lang.ClassLoader.defineClass1(Native Method)
  at java.lang.ClassLoader.defineClass(ClassLoader.java:763)
  at java.lang.ClassLoader.defineClass(ClassLoader.java:642)
  at OOMTest.main(OOMTest.java:22)

如何解决OOM

1. 要解决OOM异常或 heap space的异常，一般的手段是首先通过内存映像分析工具对dump出来的堆转储快照进行分析，重点是确认内存中的对象是否是必要的，也就是要分清楚到底是出现了内存泄露（Memory Leak）还是内存溢出（Memory Overflow)
2. 如果是内存泄露，可进一步通过工具查看泄露对象到GC Roots的引用链。于是就能找到泄露对象是通过怎样的路径与GC Roots相关联并导致垃圾收集器无法自动回收它们的。掌握了泄露对象的类型信息，以及GC Roots引用链的信息，就可以比较准确地定位出泄露代码的位置。
3. 如果不存在内存泄露，换句话说就是内存中的对象确实都还必须存活着，那就应当检查虚拟机的堆参数（-Xmx与-Xms），与机器物理内存对比看是否还可以调大，从代码上检查是否存在某些对象生命周期过长，持有状态过长的情况，尝试减少程序运行期的内存消耗。

4 方法区的内存结构

方法区（Method Area)存储什么?

《深入理解Java虚拟机》书中对方法区（Method Area）存储内容描述如下：

它用于存储已被虚拟机加载的类型信息、常量、静态常量、即时编译器编译后的代码缓存等。

方法区的内部结构

类型信息

对每个加载的类型（类class、接口interface、枚举enum、注解annotation），JVM必须在方法区中m存储一下类型信息：

1. 这个类型的完整有效名称（全名=包名.类名）
2. 这个类型直接父类的完整有效名（对于interface或是java.lang.Object,都没有父类）
3. 这个类型的修饰符（public，abstract,final的某个子集）
4. 这个类型直接接口的一个有序列表

域

• JVM必须在方法区中保存类型的所有域的相关信息以及域的声明顺序。
• 域的相关信息包括：域名称、域类型、域修饰符（public，private,protected，static,final,volatile,transient的某个子集）

方法（Method）信息

JVM必须保存所有方法的以下信息，同域信息一样包括声明顺序：

• 方法名称
• 方法的返回类型（或void）
• 方法参数的数量和类型（按顺序）
• 方法的修饰符（public、private、protected、static、final、synchronized、native、abstract的一个子集）
• 方法的字节码（bytecodes)、操作数栈、局部变量表及大小（abstart和native方法除外）
• 异常表（abstrat和native方法除外）

• 每个异常处理的开始位置、结束位置、代码处理在程序计数器中的偏移地址、被复活的异常类的常量池索引。

non-final的类变量

• 静态变量和类关联在一起，随着类的加载而加载，它们称为类数据在逻辑上的一部分。
• 类变量被类的所有实例共享，即使没有类实例时你也可以访问它。

补充说明：全局常量：static final

被声明为final的类变量的处理方法则不同，每个全局常量在编译的时候就会被分配了。

运行时常量池 vs 常量池

• 方法区，内部包含了运行时常量池。
• 字节码文件，内部包含了常量池。
• 要弄清楚方法区，需要理解清楚ClassFile，因为加载类的信息都在方法区。
• 要弄清楚方法区的运行时常量池，需要理解清楚ClassFile中的常量池。

一个有效的字节码文件中除了包含类中版本信息、字段、方法以及接口等描述信息外，还包含一项信息那就是常量池表（Constat Pool Table),包括各种字面量和对类型、域和方法的符号引用。

为什么需要常量池？

一个java源文件中的类、接口、编译后产生一个字节码文件。而Java中的字节码需要数据支持，通常这种数据会很大以至于不能直接存存到字节码里，换另一种方法，可以存到常量池，这个字节码包含了指向常量池的引用。在动态链接的时候会用到运行时常量池。

比如：如下的代码：

public class SimpleClass {
    public void sayHello() {
        System.out.println("hello");
    }
}

虽然只有194字节，但是里面却使用了String、System、PrintStream及Object等结果。这里代码量其实已经很小了。如果代码多，引用到的结构会更多,这里就需要常量池了

常量池有什么？

几种在常量池内存储的数据类型包括：

• 数量值
• 字符串值
• 类引用
• 字段引用
• 方法引用

小结

常量池，可以看做是一张表。虚拟机指令根据这张表常量表找到要执行的类名、方法名、参数类型、字面量等类型。

运行时常量池

• 运行时常量池（Runtime Constant Pool)是方法区的一部分。
• 常量池表（Constant Pool Table)是Class文件的一部分，用于存放编译器生成的各种字面量与符号引用，这部分内容将在类加载后存放到方法区的运行时常量池中。
• 运行时常量池，在加载类和接口到虚拟机后，就会创建对应的运行时常量池。
• JVM为每个已加载的类型（类或接口）都维护一个常量池。池中的数据项像数组项一样，是通过索引访问的。
• 运行时常量池中包含多种不同的常量，包括编译器就已经明确的数值字面量，也包括到运行期解析后才能够获得的方法或字段引用。此时不再是常量池中的符号地址了，这里换为真实地址。

• 运行常量池，相对于Class文件常量池的另一重要特征是：具备动态性。

• String.intern()

• 运行时常量池类似与传统编程语言中的符号表（symbol table)，但是它所包含的数据却比符号表要更加丰富一些。
• 当创建类或接口的运行时常量池时，如果构造运行时常量池所需的内存空间超过了方法区所能提供的最大值，则JVM会抛出OutOfMemoryError异常。

5 方法区使用举例

public class MethodAreaDemo {
  public static void main(String[] args) throws InterruptedException {
    int x = 500;
    int y = 100;
    int a = x / y;
    int b = 50;
    System.out.println(a + b);
  }
}

6 方法区的演进细节

方法区的演进细节

1. 首先明确：只有HotSpot才有永久代。

BEA JRockit、IBM j9等来说，是不存在永久代的概念的。原则上如何实现方法区属于虚拟机实现细节，不受《Java虚拟机规范》管束，并不要回去统一。

2. HotSpot中方法区的变化：

永久代为什么要被元空间替换

https://openjdk.java.net/jeps/122

• 随着Java8的到来，HotSpot VM中再也见不到永久代了。但是这并不意味着类的元数据信息也消失了。这些数据被移到了一个与堆不相连的本地内存区域，这个区域叫做元空间（MetaSpace) 。
• 由于类的元数据分配在本地内存中，元空间的最大可分配空间就是系统可用内存空间。
• 这项改动是很有必要的，原因有：

• 为永久代设置空间大小是很难确定的。
  在某些场景下，如果动态加载类过多，容易产生Perm区的OOM。比如某个实际Web工程中，因为功能点比较多，在运行过程中，要不断动态加载很多类，经常出现致命错误。
  “Exception in thread 'dubbo client x.x connector' java.lang.OutOfMemoryError: PermGen space"
  而元空间和永久代之间最大的区别在于：元空间并不在虚拟机中，而是使用本地内存。因此，默认情况下，元空间的大小仅受本地内存限制。
• 对永久代进行调优是很困难的

StringTable为什么要调整？

jdk7中将StringTable放到了堆空间中。因为永久代的回收效率很低，在full gc的时候才会触发。而full gc是老年代的空间不足、永久代不足时才会触发。

这就导致StringTable回收效率不高。而我们开发中会有大量的字符串被创建，回收效率低，导致永久代内存不足。放到堆里，能及时回收内存。

静态变量放哪里

/**
 * jdk7:
 * -Xms200m -Xmx200m -XX:PermSize=300m -XX:MaxPermSize=300m -XX:+PrintGCDetails
 * jdk8:
 * -Xms200m -Xmx200m -XX:Metaspace=300m -XX:MaxMetaspaceSize=300m -XX:+PrintGCDetails
 */
public class StaticFieldTest {
  /**
   * 100MB
   */
  private static byte[] arr = new byte[1024 * 1024 * 100];
  public static void main(String[] args) {
    System.out.println(StaticFieldTest.arr);
//    try {
//      Thread.sleep(1000000);
//    } catch (InterruptedException e) {
//      e.printStackTrace();
//    }
  }
}

jdk7结果：老年期里面占用102400k

Heap
 def new generation   total 61440K, used 3279K [0x19e80000, 0x1e120000, 0x1e120000)
  eden space 54656K,   6% used [0x19e80000, 0x1a1b3e00, 0x1d3e0000)
  from space 6784K,   0% used [0x1d3e0000, 0x1d3e0000, 0x1da80000)
  to   space 6784K,   0% used [0x1da80000, 0x1da80000, 0x1e120000)
 tenured generation   total 136576K, used 102400K [0x1e120000, 0x26680000, 0x26680000)
   the space 136576K,  74% used [0x1e120000, 0x24520010, 0x24520200, 0x26680000)
 compacting perm gen  total 307200K, used 251K [0x26680000, 0x39280000, 0x39280000)
   the space 307200K,   0% used [0x26680000, 0x266bef40, 0x266bf000, 0x39280000)
    ro space 10240K,  44% used [0x39280000, 0x396f7e30, 0x396f8000, 0x39c80000)
    rw space 12288K,  52% used [0x39c80000, 0x3a2ceb58, 0x3a2cec00, 0x3a880000)

jdk8 ParOldGen:102400K

Heap
 PSYoungGen      total 59904K, used 5181K [0x00000000fbd80000, 0x0000000100000000, 0x0000000100000000)
  eden space 51712K, 10% used [0x00000000fbd80000,0x00000000fc28f428,0x00000000ff000000)
  from space 8192K, 0% used [0x00000000ff800000,0x00000000ff800000,0x0000000100000000)
  to   space 8192K, 0% used [0x00000000ff000000,0x00000000ff000000,0x00000000ff800000)
 ParOldGen       total 136704K, used 102400K [0x00000000f3800000, 0x00000000fbd80000, 0x00000000fbd80000)
  object space 136704K, 74% used [0x00000000f3800000,0x00000000f9c00010,0x00000000fbd80000)
 Metaspace       used 3469K, capacity 4496K, committed 4864K, reserved 1056768K
  class space    used 381K, capacity 388K, committed 512K, reserved 1048576K

结论：静态引用对应的对象实体始终都存在在堆空间

使用JHSDB工具进行分析，这里细节略掉

文件在jdk9/bin/jhsdb.exe

public class StaticObjTest {
  static class Test {
    static ObjectHolder staticObj = new ObjectHolder();
    ObjectHolder instanceObj = new ObjectHolder();
    void foo () {
      ObjectHolder localObj = new ObjectHolder();
      System.out.println("done");
    }
  }
  private static class ObjectHolder {
  }
  public static void main(String[] args) {
    Test test = new StaticObjTest.Test();
    test.foo();
  }
}

staticObj随着Test的类型信息存放在方法区，instanceObj随着Test的对象实例存放在Java堆,localObject则是存放在foo()方法的栈帧的局部变量表

测试发现：三个对象的数据在内存中的地址都落在Eden区范围内，所以结论：只要是对象实例，必然会在Java堆中分配

接着，找到了一个引用该staticObj对象的地方，是一个java.lang.Class的实例里，并且给出了这个实例的地址，通过Inspector查看该对象实例，可以清楚看到这确实是一个java.lang.Class类型的对象实例，里面有一个名为staticObj的实例字段：

从《Java虚拟机规范》所定义的概念模型来看，所有Class相关的信息都应该存放在方法区之中，但方法区该如何实现，《Java虚拟机规范》并为做出规定，这就成了一件允许不同虚拟机自己灵活把握的事情。JDK 7及以后版本的HotSpot虚拟机选择把静态变量与类型在Java语言一端的映射Class对象存放在一起，存储于Java堆之中，从我们实验中也明确验证了这一点。

7 方法区的垃圾回收

有些人认为方法区（如HotSpot虚拟机中的元空间或者永久代）是没有垃圾收集行为的，其实不然。《Java虚拟机规范》对方法区的约束是非常宽松的，提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在（如JDK 11时期的ZGC收集器就不支持类卸载）。

一般来说这个区域的回收效果比较难令人满意，尤其是类型的卸载，条件相当苛刻。但是这部分区域的回收有时又确实是必要的。以前Sun公司的Bug列表中，曾出现过的若干个严重的Bug就是由于低版本的HotSpot虚拟机对此区域未完全回收而导致内存泄露。

方法区的垃圾收集主要回收两部分内容：常量池中废弃的常量和不再使用的类型。

• 先来说说方法区常量池之中主要存放的两大类常量：字面量和符号引用。字面量比较接近Java语言层次的常量概念，如文本字符串、被声明为final的常量值等。而符号引用则属于编译原理方面的概念，包括下面三类常量：

1. 类和接口的全限定名
2. 字段的名称和描述符
3. 方法的名称和描述符

• HotSpot虚拟机对常量池的回收策略是很明确的，只要常量池中的常量没有被任何地方引用，就可以被回收
• 回收废弃常量与回收Java堆中的对象非常类似。

类的垃圾回收

• 判断一个常量是否“废弃”还是相对简单，而要判定一个类型是否属于“不在被使用的类”的条件条件就比较苛刻了。需要同事满足下面三个条件：

• 该类所有的实例都已经被回收，也就是Java堆中不存在该类及其任何派生子类的实例。
• 加载该类的类加载器已经被回收，这个条件除非是经过精心设计的可替换类加载器的场景，如OSGI、JSP的重加载等，否则通常是很难达成的。
• 该类对相应java.lang.Class对象没有在任何地方被引用，无法再任何地方通过反射访问该类的方法。

• Java虚拟机被允许对满足上述三个条件的无用类进行回收，这里说的仅仅是“被允许”，而并不是和对象一样，没有引用了就必然会被回收。关于是否要对类型进行回收，HotSpot虚拟机提供了-XnoClassgc参数进行控制，还可以使用-verbose:class以及-XX:+TraceClass-Loading、-XX:+TraceClassUnLoading查看类加载和卸载信息
• 在大量使用反射、动态代理、CGLib等字节码框架，动态生成JSP以及OSGI这类频繁自定义类加载器的场景中，通常都需要Java虚拟机具备类型卸载的能力，以保证不会对方法区造成过大的内存压力。

8 总结

常见面试题