【JVM】方法区（十）

1、栈 堆 方法区的交互关系

　　从内存结构来看　　

　　

　　从线程共享与否的角度来看

　　

　　栈、堆、方法区的交互关系

　　下面就涉及了对象的访问定位

1. Person 类的 .class 信息存放在方法区中
2. person 变量存放在 Java 栈的局部变量表中
3. 真正的 person 对象存放在 Java 堆中
4. 在 person 对象中，有个指针指向方法区中的 person 类型数据，表明这个 person 对象是用方法区中的 Person 类 new 出来的

　　

2、方法区的理解

　　官方文档: https://docs.oracle.com/javase/specs/jvms/se8/html/jvms-2.html#jvms-2.5.4

2.1、方法区的位置

1. 《Java虚拟机规范》中明确说明：尽管所有的方法区在逻辑上是属于堆的一部分，但一些简单的实现可能不会选择去进行垃圾收集或者进行压缩。

2. 但对于HotSpotJVM而言，方法区还有一个别名叫做Non-Heap（非堆），目的就是要和堆分开。

3. 所以，方法区可以看作是一块独立于Java堆的内存空间。

2.2、方法区的理解

　　方法区主要存放的是 Class，而堆中主要存放的是实例化的对象

1. 方法区（Method Area）与Java堆一样，是各个线程共享的内存区域

2. 多个线程同时加载统一个类时，只能有一个线程能加载该类，其他线程只能等等待该线程加载完毕，然后直接使用该类，即类只能加载一次。

3. 方法区在JVM启动的时候被创建，并且它的实际的物理内存空间中和Java堆区一样都可以是不连续的。

4. 方法区的大小，跟堆空间一样，可以选择固定大小或者可扩展。

5. 方法区的大小决定了系统可以保存多少个类，如果系统定义了太多的类，导致方法区溢出，虚拟机同样会抛出内存溢出错误：

   • JDK7及以前：java.lang.OutofMemoryError:PermGen space
   • 或者
   • JDK8及以后：java.lang.OutOfMemoryError:Metaspace

6. 举例说明方法区 OOM。

   • 加载大量的第三方的jar包

   • Tomcat部署的工程过多（30~50个）

   • 大量动态的生成反射类

7. 关闭JVM就会释放这个区域的内存

 　　代码举例

• 代码

  public class MethodAreaTest {
      public static void main(String[] args) {
          System.out.println("start...");
          try {
              Thread.sleep(1000000);
          } catch (InterruptedException e) {
              e.printStackTrace();
          }
          System.out.println("end...");
      }
  }

• 简单的程序，加载了好多类

　　　

2.3、方法区演进过程

　　Hotspot 方法区的演进过程

1. 在 JDK7 及以前，习惯上把方法区，称为永久代。JDK8开始，使用元空间取代了永久代。JDK 1.8后，元空间存放在堆外内存中

2. 我们可以将方法区类比为Java中的接口，将永久代或元空间类比为Java中具体的实现类

3. 本质上，方法区和永久代并不等价。仅是对Hotspot而言的可以看作等价。《Java虚拟机规范》对如何实现方法区，不做统一要求。例如：BEAJRockit / IBM J9 中不存在永久代的概念。

4. 现在来看，当年使用永久代，不是好的idea。导致Java程序更容易OOm（超过-XX:MaxPermsize上限）

5. 而到了JDK8，终于完全废弃了永久代的概念，改用与JRockit、J9一样在本地内存中实现的元空间（Metaspace）来代替

6. 元空间的本质和永久代类似，都是对JVM规范中方法区的实现。不过元空间与永久代最大的区别在于：元空间不在虚拟机设置的内存中，而是使用本地内存

7. 永久代、元空间二者并不只是名字变了，内部结构也调整了

8. 根据《Java虚拟机规范》的规定，如果方法区无法满足新的内存分配需求时，将抛出OOM异常

　　

　　

3、设置方法区大小与 OOM

　　方法区的大小不必是固定的，JVM可以根据应用的需要动态调整。

3.1、JDK7 永久代

　　JDK7 之前版本设置永久代大小

1. 通过-XX:Permsize来设置永久代初始分配空间。默认值是20.75M

2. -XX:MaxPermsize来设定永久代最大可分配空间。32位机器默认是64M，64位机器模式是82M

3. 当JVM加载的类信息容量超过了这个值，会报异常OutofMemoryError:PermGen space。

3.2、JDK8 元空间

　　JDK8 版本设置元空间大小

1. 元数据区大小可以使用参数 -XX:MetaspaceSize 和 -XX:MaxMetaspaceSize 指定

2. 默认值依赖于平台，Windows下，-XX:MetaspaceSize 约为21M，-XX:MaxMetaspaceSize的值是-1，即没有限制。

3. 与永久代不同，如果不指定大小，默认情况下，虚拟机会耗尽所有的可用系统内存。如果元数据区发生溢出，虚拟机一样会抛出异常OutOfMemoryError:Metaspace

4. -XX:MetaspaceSize：设置初始的元空间大小。对于一个 64位 的服务器端 JVM 来说，其默认的 -XX:MetaspaceSize值为21MB。这就是初始的高水位线，一旦触及这个水位线，Full GC将会被触发并卸载没用的类（即这些类对应的类加载器不再存活），然后这个高水位线将会重置。新的高水位线的值取决于GC后释放了多少元空间。

   • 如果释放的空间不足，那么在不超过MaxMetaspaceSize时，适当提高该值。
   • 如果释放空间过多，则适当降低该值。

5. 如果初始化的高水位线设置过低，上述高水位线调整情况会发生很多次。通过垃圾回收器的日志可以观察到Full GC多次调用。为了避免频繁地GC，建议将-XX:MetaspaceSize设置为一个相对较高的值。

　　配置元空间大小示例

• 代码

  /**
   * 测试方法区默认大小
   *
   *  JDK7及以前
   *  设置参数：-XX:PermSize=100m -XX:MaxPermSize=100m
   *
   *  JDK8及以后
   *  设置参数：-XX:MetaspaceSize=100m -XX:MaxMetaspaceSize=100m
   *
   *  查看
   *      命令：jps
   *      命令：jinfo -flag MetaspaceSize pid
   *
   */
  public class MethodAreaTest {
      public static void main(String[] args) {
          System.out.println("start...");
          try {
              Thread.sleep(1000000);
          } catch (InterruptedException e) {
              e.printStackTrace();
          }
          System.out.println("end...");
      }
  }

• JVM 参数

　　　　-XX:MetaspaceSize=100m -XX:MaxMetaspaceSize=100m

• 命令（jps、jinfo）查看设置的元空间大小

  MacBook-Pro-22907:test-jvm h__d$ jps
  51988 Main
  51846 Launcher
  6679 
  51847 MethodAreaTest
  52334 Jps
  MacBook-Pro-22907:test-jvm h__d$ jinfo -flag MetaspaceSize 51847
  -XX:MetaspaceSize=104857600

3.3、方法区 OOM

　　方法区 OOM 举例

• 代码：OOMTest 类继承 ClassLoader 类，获得 defineClass() 方法，可自己进行类的加载

  /**
   *  JDK7及以前
   *  设置参数：-XX:PermSize=100m -XX:MaxPermSize=100m
   *
   *  JDK8及以后
   *  设置参数：-XX:MetaspaceSize=100m -XX:MaxMetaspaceSize=100m
   *
   * 示例：前提设置方法区大小，不停的加载类，造成方法区OOM
   */
  public class OOMTest extends ClassLoader{
      public static void main(String[] args) {
          int j = 0;
          try {
              OOMTest test = new OOMTest();
              for (int i = 0; i < 10000; i++) {
                  //创建ClassWriter对象，用于生成类的二进制字节码
                  ClassWriter classWriter = new ClassWriter(0);
                  //指明版本号，修饰符，类名，包名，父类，接口
                  classWriter.visit(Opcodes.V1_8, Opcodes.ACC_PUBLIC, "Class" + i, null, "java/lang/Object", null);
                  //返回byte[]
                  byte[] code = classWriter.toByteArray();
                  //类的加载
                  test.defineClass("Class" + i, code, 0, code.length);//Class对象
                  j++;
              }
          } finally {
              System.out.println(j);
          }
      }
  } 

• 运行参数：-XX:MetaspaceSize=10m -XX:MaxMetaspaceSize=10m

• 运行结果
  

3.4、解决 OOM

　　如何解决 OOM？

1. 要解决OOM异常或heap space的异常，一般的手段是首先通过内存映像分析工具（如Ec1ipse Memory Analyzer）对dump出来的堆转储快照进行分析，重点是确认内存中的对象是否是必要的，也就是要先分清楚到底是出现了内存泄漏（Memory Leak）还是内存溢出（Memory Overflow）

2. 内存泄漏就是有大量的引用指向某些对象，但是这些对象以后不会使用了，但是因为它们还和GC ROOT有关联，所以导致以后这些对象也不会被回收，这就是内存泄漏的问题

3. 如果是内存泄漏，可进一步通过工具查看泄漏对象到GC Roots的引用链。于是就能找到泄漏对象是通过怎样的路径与GC Roots相关联并导致垃圾收集器无法自动回收它们的。掌握了泄漏对象的类型信息，以及GC Roots引用链的信息，就可以比较准确地定位出泄漏代码的位置。

4. 如果不存在内存泄漏，换句话说就是内存中的对象确实都还必须存活着，那就应当检查虚拟机的堆参数（-Xmx与-Xms），与机器物理内存对比看是否还可以调大，从代码上检查是否存在某些对象生命周期过长、持有状态时间过长的情况，尝试减少程序运行期的内存消耗。

4、方法区的内部结构

4.1、方法区结构

　　方法区（Method Area）存储什么？

 　　

　　《深入理解Java虚拟机》书中对方法区（Method Area）存储内容描述如下：

　　它用于存储已被虚拟机加载的类型信息、常量、静态变量、即时编译器编译后的代码缓存等。

 　　

　　类型信息

　　对每个加载的类型（类class、接口interface、枚举enum、注解annotation），JVM必须在方法区中存储以下类型信息：

1. 这个类型的完整有效名称（全名=包名.类名）

2. 这个类型直接父类的完整有效名（对于interface或是java.lang.Object，都没有父类）

3. 这个类型的修饰符（public，abstract，final的某个子集）

4. 这个类型直接接口的一个有序列表

　　

　　域（Field）信息

1. JVM必须在方法区中保存类型的所有域的相关信息以及域的声明顺序。

2. 域的相关信息包括：

   • 域名称

   • 域类型

   • 域修饰符（public，private，protected，static，final，volatile，transient的某个子集）

　　

　　方法（Method）信息

　　JVM必须保存所有方法的以下信息，同域信息一样包括声明顺序：

1. 方法名称

2. 方法的返回类型（包括 void 返回类型），void 在 Java 中对应的类为 void.class

3. 方法参数的数量和类型（按顺序）

4. 方法的修饰符（public，private，protected，static，final，synchronized，native，abstract的一个子集）

5. 方法的字节码（bytecodes）、操作数栈、局部变量表及大小（abstract和native方法除外）

6. 异常表（abstract和native方法除外），异常表记录每个异常处理的开始位置、结束位置、代码处理在程序计数器中的偏移地址、被捕获的异常类的常量池索引

　　

　　说明：

1. descriptor: ()V 表示方法返回值类型为 void

2. flags: ACC_PUBLIC 表示方法权限修饰符为 public

3. stack=3 表示操作数栈深度为 3

4. locals=2 表示局部变量个数为 2 个（实力方法包含 this）

5. test1() 方法虽然没有参数，但是其 args_size=1 ，这时因为将 this 作为了参数

　　代码示例

• 代码

  /**
   * 测试方法区的内部构成
   */
  public class MethodInnerStrucTest extends Object implements Comparable<String>, Serializable {
      //属性
      public int num = 10;
      private static String str = "测试方法的内部结构";
  
      //构造器没写
  
      //方法
      public void test1() {
          int count = 20;
          System.out.println("count = " + count);
      }
  
      public static int test2(int cal) {
          int result = 0;
          try {
              int value = 30;
              result = value / cal;
          } catch (Exception e) {
              e.printStackTrace();
          }
          return result;
      }
  
      @Override
      public int compareTo(String o) {
          return 0;
      }
  }

• 反编译字节码文件，并输出值文本文件中，便于查看

• 参数 -p 确保能查看 private 权限类型的字段或方法

　　   javap -v -p MethodInnerStrucTest.class > Text.txt

4.2、域信息特殊情况

　　non-final 类型的类变量

1. 静态变量和类关联在一起，随着类的加载而加载，他们成为类数据在逻辑上的一部分

2. 类变量被类的所有实例共享，即使没有类实例时，你也可以访问它

　　代码示例

1. 如下代码所示，即使我们把order设置为null，也不会出现空指针异常

2. 这更加表明了 static 类型的字段和方法随着类的加载而加载，并不属于特定的类实例

   /**
    * non-final的类变量
    */
   public class StaticVariableTest {
       public static void main(String[] args) {
           Order order = null;
           order.hello();
           System.out.println(order.count);
       }
   }
   
   class Order {
       public static int count = 1;
       public static final int number = 2;
   
   
       public static void hello() {
           System.out.println("hello!");
       }
   }

3. 运行结果，未报错
   

　　全局常量：static final

1. 全局常量就是使用 static final 进行修饰

2. 被声明为final的类变量的处理方法则不同，每个全局常量在编译的时候就会被分配了。

3. 反编译上面字节码文件Order.class，查看字节码指令，可以发现 number 的值已经写死在字节码文件中了

　　　　命令：javap -v Order.class 

　　　　　　　　

4.3、运行时常量池

　　运行时常量池 VS 常量池

　　官方文档：https://docs.oracle.com/javase/specs/jvms/se8/html/jvms-4.html

1. 方法区，内部包含了运行时常量池

2. 字节码文件，内部包含了常量池

3. 要弄清楚方法区，需要理解清楚ClassFile，因为加载类的信息都在方法区。

4. 要弄清楚方法区的运行时常量池，需要理解清楚ClassFile中的常量池。

　　常量池

1. 一个有效的字节码文件中除了包含类的版本信息、字段、方法以及接口等描述符信息外

2. 还包含一项信息就是常量池表（Constant Pool Table），包括各种字面量和对类型、域和方法的符号引用

　　

　　为什么需要常量池？

1. 一个java源文件中的类、接口，编译后产生一个字节码文件。而Java中的字节码需要数据支持，通常这种数据会很大以至于不能直接存到字节码里，换另一种方式，可以存到常量池

2. 这个字节码包含了指向常量池的引用。在动态链接的时候会用到运行时常量池，之前有介绍

　　比如：如下的代码：

public class SimpleClass {
    public void sayHello() {
        System.out.println("hello");
    }
}

1. 虽然上述代码只有194字节，但是里面却使用了String、System、PrintStream及Object等结构。

2. 如果不使用常量池，就需要将用到的类信息、方法信息等记录在当前的字节码文件中，造成文件臃肿

3. 所以我们将所需用到的结构信息记录在常量池中，并通过引用的方式，来加载、调用所需的结构

4. 这里的代码量其实很少了，如果代码多的话，引用的结构将会更多，这里就需要用到常量池了。

　　常量池中有啥？

1. 数量值

2. 字符串值

3. 类引用

4. 字段引用

5. 方法引用

　　常量池代码举例

• 代码

  public class MethodInnerStrucTest extends Object implements Comparable<String>, Serializable {
      //属性
      public int num = 10;
      private static String str = "测试方法的内部结构";
  
      //构造器没写
  
      //方法
      public void test1() {
          int count = 20;
          System.out.println("count = " + count);
      }
  
      public static int test2(int cal) {
          int result = 0;
          try {
              int value = 30;
              result = value / cal;
          } catch (Exception e) {
              e.printStackTrace();
          }
          return result;
      }
  
      @Override
      public int compareTo(String o) {
          return 0;
      }
  }

• javap反编译之后
  

　　常量池总结

　　常量池、可以看做是一张表，虚拟机指令根据这张常量表找到要执行的类名、方法名、参数类型、字面量等类型

　　运行时常量池

1. 运行时常量池（Runtime Constant Pool）是方法区的一部分。

2. 常量池表（Constant Pool Table）是Class字节码文件的一部分，用于存放编译期生成的各种字面量与符号引用，这部分内容将在类加载后存放到方法区的运行时常量池中。

3. 运行时常量池，在加载类和接口到虚拟机后，就会创建对应的运行时常量池。

4. JVM为每个已加载的类型（类或接口）都维护一个常量池。池中的数据项像数组项一样，是通过索引访问的。

5. 运行时常量池中包含多种不同的常量，包括编译期就已经明确的数值字面量，也包括到运行期解析后才能够获得的方法或者字段引用。此时不再是常量池中的符号地址了，这里换为真实地址。

6. 运行时常量池，相对于Class文件常量池的另一重要特征是：具备动态性。

7. 运行时常量池类似于传统编程语言中的符号表（symbol table），但是它所包含的数据却比符号表要更加丰富一些。

8. 当创建类或接口的运行时常量池时，如果构造运行时常量池所需的内存空间超过了方法区所能提供的最大值，则JVM会抛OutofMemoryError异常。

6、方法区演进细节

6.1、永久代演进过程

　　关于永久代的说明

1. 首先明确：只有Hotspot才有永久代。

2. BEA JRockit、IBMJ9等来说，是不存在永久代的概念的。原则上如何实现方法区属于虚拟机实现细节，不受《Java虚拟机规范》管束，并不要求统一

3. Hotspot中方法区的变化：

   JDK 版本	演变细节
   JDK1.6及以前	有永久代（permanent generation），静态变量存储在永久代上
   JDK1.7	有永久代，但已经逐步 “去永久代”，字符串常量池，静态变量移除，保存在堆中
   JDK1.8	无永久代，类型信息，字段，方法，常量保存在本地内存的元空间，但字符串常量池、静态变量仍然在堆中。

　　JDK 6 方法区

　　

　　JDK 7 方法区

　　

　　JDK 8 方法区

　　

6.2、元空间出现原因

　　永久代为什么要被元空间替代？

　　官方文档: http://openjdk.java.net/jeps/122

1. 官方的牵强解释：JRockit是和HotSpot融合后的结果，因为JRockit没有永久代，所以他们不需要配置永久代

2. 随着Java8的到来，HotSpot VM中再也见不到永久代了。但是这并不意味着类的元数据信息也消失了。这些数据被移到了一个与堆不相连的本地内存区域，这个区域叫做元空间（Metaspace）。

　　由于类的元数据分配在本地内存中，元空间的最大可分配空间就是系统可用内存空间，这项改动是很有必要的，原因有：

1. 为永久代设置空间大小是很难确定的。

   1. 在某些场景下，如果动态加载类过多，容易产生Perm区的OOM。比如某个实际Web工
      程中，因为功能点比较多，在运行过程中，要不断动态加载很多类，经常出现致命错误。Exception in thread 'dubbo client x.x connector' java.lang.OutOfMemoryError:PermGen space　　
   2. 而元空间和永久代之间最大的区别在于：元空间并不在虚拟机中，而是使用本地内存。
      因此，默认情况下，元空间的大小仅受本地内存限制。

2. 对永久代进行调优是很困难的。

   1. 方法区的垃圾收集主要回收两部分内容：常量池中废弃的常量和不再用的类型，方法区的调优主要是为了降低Full GC

   2. 有些人认为方法区（如HotSpot虚拟机中的元空间或者永久代）是没有垃圾收集行为的，其实不然。《Java虚拟机规范》对方法区的约束是非常宽松的，提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在（如JDK11时期的ZGC收集器就不支持类卸载）。

   3. 一般来说这个区域的回收效果比较难令人满意，尤其是类型的卸载，条件相当苛刻。但是这部分区域的回收有时又确实是必要的。以前Sun公司的Bug列表中，曾出现过的若干个严重的Bug就是由于低版本的HotSpot虚拟机对此区域未完全回收而导致内存泄漏

6.3、字符串常量池

　　字符串常量池 StringTable 为什么要调整位置？

1. JDK7中将StringTable放到了堆空间中。因为永久代的回收效率很低，在Full GC的时候才会执行永久代的垃圾回收，而Full GC是老年代的空间不足、永久代不足时才会触发。

2. 这就导致StringTable回收效率不高，而我们开发中会有大量的字符串被创建，回收效率低，导致永久代内存不足。放到堆里，能及时回收内存。

6.4、静态变量位置

• 从《Java虚拟机规范》所定义的概念模型来看，所有Class相关的信息都应该存放在方法区之中，但方法区该如何实现，《Java虚拟机规范》并未做出规定，这就成了一件允许不同虚拟机自己灵活把握的事情。JDK7及其以后版本的HotSpot虚拟机选择把静态变量与类型在Java语言一端的映射Class对象存放在一起，存储于Java堆之中，从我们的实验中也明确验证了这一点

　　参考：https://blog.csdn.net/oneby1314/article/details/108040357 

7、方法区的垃圾回收

　　方法区垃圾收集

1. 有些人认为方法区（如Hotspot虚拟机中的元空间或者永久代）是没有垃圾收集行为的，其实不然。

2. 《Java虚拟机规范》对方法区的约束是非常宽松的，提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在（如JDK11时期的ZGC收集器就不支持类卸载）。

3. 一般来说这个区域的回收效果比较难令人满意，尤其是类型的卸载，条件相当苛刻。但是这部分区域的回收有时又确实是必要的。以前sun公司的Bug列表中，曾出现过的若干个严重的Bug就是由于低版本的HotSpot虚拟机对此区域未完全回收而导致内存泄漏。

4. 方法区的垃圾收集主要回收两部分内容：常量池中废弃的常量和不再使用的类型。

　　方法区常量的回收 

1. 先来说说方法区内常量池之中主要存放的两大类常量：字面量和符号引用

   • 字面量比较接近Java语言层次的常量概念，如文本字符串、被声明为final的常量值等
   • 而符号引用则属于编译原理方面的概念，包括下面三类常量：
     • 类和接口的全限定名
     • 字段的名称和描述符
     • 方法的名称和描述符

2. HotSpot虚拟机对常量池的回收策略是很明确的，只要常量池中的常量没有被任何地方引用，就可以被回收。

3. 回收废弃常量与回收Java堆中的对象非常类似。（关于常量的回收比较简单，重点是类的回收）

 　　方法区类的回收

　　判定一个常量是否“废弃”还是相对简单，而要判定一个类型是否属于“不再被使用的类”的条件就比较苛刻了。需要同时满足下面三个条件：

1. 该类所有的实例都已经被回收，也就是Java堆中不存在该类及其任何派生子类的实例。
2. 加载该类的类加载器已经被回收，这个条件除非是经过精心设计的可替换类加载器的场景，如OSGi、JSP的重加载等，否则通常是很难达成的。
3. 该类对应的java.lang.Class对象没有在任何地方被引用，无法在任何地方通过反射访问该类的方法。

　　Java虚拟机被允许对满足上述三个条件的无用类进行回收，这里说的仅仅是“被允许”，而并不是和对象一样，没有引用了就必然会回收。关于是否要对类型进行回收，HotSpot虚拟机提供了-Xnoclassgc参数进行控制，还可以使用-verbose:class 以及 -XX：+TraceClass-Loading、-XX：+TraceClassUnLoading查看类加载和卸载信息

　　在大量使用反射、动态代理、CGLib等字节码框架，动态生成JSP以及OSGi这类频繁自定义类加载器的场景中，通常都需要Java虚拟机具备类型卸载的能力，以保证不会对方法区造成过大的内存压力。