深入理解JVM底层原理——方法区

发布时间:2024-02-27 10:01

运行时数据区结构图:

深入理解JVM底层原理——方法区_第1张图片

1、栈、堆、方法区的交互关系

从线程共享与否的角度来看运行时数据区的结构:

深入理解JVM底层原理——方法区_第2张图片

栈、堆、方法区之间的交互关系

深入理解JVM底层原理——方法区_第3张图片

2、方法区的理解

官方文档:

深入理解JVM底层原理——方法区_第4张图片

方法区在哪里?

《Java虚拟机贵方》中明确说明:“尽管所有的方法区在逻辑上是属于堆的一部分,但一些简单的实现可能不会选择区进行垃圾收集或者进行压缩。”但对于HotSpotJVM而言,方法区还有一个别名叫做Non-Heap(非堆),目的就是要和堆分开。

所以,方法区看作是一块独立于Java堆的内存空间

深入理解JVM底层原理——方法区_第5张图片

方法区的基本理解

  • 方法区(Method Area)与Java堆一样,是各个线程共享的内存区域。
  • 方法区在JVM启动的时候就被创建,并且它的实际的物理内存空间中和Java堆区一样都可以是不连续的。
  • 方法区的大小决定了系统可以保存多少个类,如果系统定义了太多的类,导致方法区溢出,虚拟机同样会抛出内存溢出错误:java.lang.OutOfMemoryError:PerGen space或者java.lang.OutOfMemoryError:Metaspace
    • 加载大量的第三方的jar包;Tomcat部署的工程过多(30-50个);大量动态的生成反射类
  • 关闭JVM就会释放这个区域的内存。

例:启动以下代码,并使用JVisualVM查看方法区加载的类元信息

package com.atguigu.java;

/**
 *  测试设置方法区大小参数的默认值
 *
 *  jdk7及以前:
 *  -XX:PermSize=100m -XX:MaxPermSize=100m
 *
 *  jdk8及以后:
 *  -XX:MetaspaceSize=100m  -XX:MaxMetaspaceSize=100m
 * @author shkstart  shkstart@126.com
 * @create 2020  12:16
 */
public class MethodAreaDemo {
    public static void main(String[] args) {
        System.out.println("start...");
//        try {
//            Thread.sleep(1000000);
//        } catch (InterruptedException e) {
//            e.printStackTrace();
//        }

        System.out.println("end...");
    }
}

深入理解JVM底层原理——方法区_第6张图片

HotSpot中方法区的演进

  • 在jdk7及以前,习惯上把方法区,称为永久代。jdk8开始,使用元空间取代了永久代。
  • 本质上,方法区和永久代并不等价。仅是对hotspot而言的。《Java虚拟机规范》对如何实现方法区,不做统一要求。例如:BEA JRockit / IBM J9中不存在永久代的概念。
    • 现在看来,当年使用永久代,不是好的idea。导致Java程序更容易OOM(超过-XX:MaxPermSize上限)

深入理解JVM底层原理——方法区_第7张图片

  • 而到了JDK8,终于完全废弃了永久代的概念,改用与JRockit、J9一样在本地内存中实现的元空间(Metaspace)来代替
  • 元空间的本质和永久代类似,都是堆JVM规范中方法区的实现。不过元空间与永久代最大的区别在于:元空间不再虚拟机设置的内存中,而是使用本地内存
  • 永久代、元空间二者并不是名字变了,内部结构也调整了
  • 根据《Java虚拟机规范》的规定,如果方法区无法满足新的内存分配需求时,将抛出OOM异常

深入理解JVM底层原理——方法区_第8张图片

3、设置方法区大小与OOM

  • 方法区的大小不必是固定的,jvm可以根据应用的需要动态调整。
  • jdk7及以前
    • 通过-XX:PermSize来设置永久代出世分配空间。默认值是20.75M
    • -XX:MaxPermSize来设置永久代最大可分配空间。32位机器默认是64M,64位机器默认是82M
    • 当JVM加载的类信息容量超过了这个值,会报异常OutOfMemoryError:PermGen space

例:

package com.atguigu.java;

/**
 *  测试设置方法区大小参数的默认值
 *
 *  jdk7及以前:
 *  -XX:PermSize=100m -XX:MaxPermSize=100m
 *
 *  jdk8及以后:
 *  -XX:MetaspaceSize=100m  -XX:MaxMetaspaceSize=100m
 * @author shkstart  shkstart@126.com
 * @create 2020  12:16
 */
public class MethodAreaDemo {
    public static void main(String[] args) {
        System.out.println("start...");
        try {
            Thread.sleep(1000000);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }

        System.out.println("end...");
    }
}

使用JDK7运行:

深入理解JVM底层原理——方法区_第9张图片

  • jdk8及以后
    • 元数据区大小可以使用参数-XX:MetaspaceSize和-XX:MaxMetaspaceSize指定,替代上述原有的两个参数。
    • 默认值依赖于平台。windows下,-XX:MetaspaceSize是21M,-XX:MaxMetaspaceSize是-1,即没有限制
    • 与永久代不同,如果不指定大小,默认情况下,虚拟机会耗尽所有的可用系统内存。如果元数据区发生溢出,虚拟机一样会抛出异常OutOfMemoryError:Metaspace
    • -XX:MetaspaceSize:设置初始的元空间大小。对于一个64位的服务器端JVM来说,其默认的-XX:MetaspaceSize值为21MB。这就是初始的高水位线,一旦触及这个水位线,Full GC将会被触发并卸载没用的类(即这些类对应的类加载器不再存活),然后这个高水位线将会重置。新的高水位线的值取决于GC后释放了多少元空间。如果释放的空间不足,那么在不超过MaxMetaspaceSize时,适当提高该值。如果释放空间过多,则适当降低该值。 
    • 如果初始化的高水位线设置过低,上述高水位线调整情况会发生很多次。通过垃圾回收器的日志可以观察到Full GC多次调用。为了避免频繁地GC,建议将-XX:MetaspaceSize设置为一个相对较高的值。

使用JDK8及以上版本运行上边的例子:

深入理解JVM底层原理——方法区_第10张图片

举例方法区内存溢出:

《深入理解Java虚拟机》中的例子:

深入理解JVM底层原理——方法区_第11张图片

自己实现的例子:

package com.atguigu.java;

import com.sun.xml.internal.ws.org.objectweb.asm.ClassWriter;
import jdk.internal.org.objectweb.asm.Opcodes;

/**
 * jdk6/7中:
 * -XX:PermSize=10m -XX:MaxPermSize=10m
 *
 * jdk8中:
 * -XX:MetaspaceSize=10m -XX:MaxMetaspaceSize=10m
 *
 * @author shkstart  shkstart@126.com
 * @create 2020  22:24
 */
public class OOMTest extends ClassLoader {
    public static void main(String[] args) {
        int j = 0;
        try {
            OOMTest test = new OOMTest();
            for (int i = 0; i < 10000; i++) {
                //创建ClassWriter对象,用于生成类的二进制字节码
                ClassWriter classWriter = new ClassWriter(0);
                //指明版本号,修饰符,类名,包名,父类,接口
                classWriter.visit(Opcodes.V1_6, Opcodes.ACC_PUBLIC, "Class" + i, null, "java/lang/Object", null);
                //返回byte[]
                byte[] code = classWriter.toByteArray();
                //类的加载
                test.defineClass("Class" + i, code, 0, code.length);//Class对象
                j++;
            }
        } finally {
            System.out.println(j);
        }
    }
}

JDK8中返回的结果:设置MetaspaceSize=10m,MaxMetaspaceSize=10m

深入理解JVM底层原理——方法区_第12张图片

JDK7返回的结果:设置PermSize=5m,MaxPermSize=5m

深入理解JVM底层原理——方法区_第13张图片

如何解决这些OOM?

  1. 要解决OOM异常或heap space的异常,一般的手段是首先通过内存映像分析工具(如Eclipse Memory Analyzer)对dump出来的堆转储快照进行分析,重点是确认内存中的对象是否是必要的,也就是要先分清楚到底是出现了内存泄漏(Memory Leak)还是内存溢出(Memory Over-flow)。
  2. 如果是内存泄漏,可进一步通过工具查看泄漏对象到GC Roots的引用链。于是就能找到泄漏对象是通过怎样的路径与GC Roots相关联并导致垃圾收集器无法自动回收它们的。掌握了泄漏对象的类型信息,以及GC Roots引用链的信息,就可以比较准确地定位出泄漏代码的位置。
  3. 如果不存在内存泄漏,换句话说就是内存中的对象确实都还必须存活着,那就应当检查虚拟机的堆参数(-Xmx与-Xms),与机器物理内存对比看是否还可以调大,从代码上检查是否存在某些对象生命周期过长、持有状态时间过长的情况,尝试减少程序运行期的内存消耗。

4、方法区的内部结构

深入理解JVM底层原理——方法区_第14张图片

方法区(Method Area)存储什么?

《深入理解Java虚拟机》书中对方法区(Method Area)存储内容描述如下:它用于存储已被虚拟机加载的类型信息、常量、静态变量、即时编译器编译后的代码缓存等。

类型信息

对每个加载的类型(类class、接口interface、枚举enum、注解annotation),JVM必须在方法区中存储以下类型信息:

  1. 这个类型的完整有效名称(全名=包名.类名)
  2. 这个类型直接父类的完整有效名(对于interface或是java.lang.Object,都没有父类)
  3. 这个类型的修饰符(public,abstract,final的某个子集)
  4. 这个类型直接接口的一个有序列表

域(Field)信息

  • JVM必须在方法区中保存类型的所有域的相关信息以及域的生命顺序。
  • 域的相关信息包括:域名称、域类型、域修饰符(public,private,protected,static,final,volatile,transient的某个子集)

方法(Method)信息

JVM必须保存所有方法的以下信息,同域信息一样包括声明顺序:

  • 方法名称
  • 方法的返回类型(或void)
  • 方法参数的数量和类型(按顺序)
  • 方法的修饰符(public,private,protected,static,final,synchronized,native,abstract的一个子集)
  • 方法的字节码(bytecodes)、操作数栈、局部变量表及大小(abstract和native方法除外)
  • 异常表(sbstract和native方法除外)
    • 每个异常处理的开始位置、结束位置、代码处理在程序计数器中的偏移地址、被捕获的异常类的常量池索引

例:

package com.atguigu.java;

import java.io.Serializable;

/**
 * 测试方法区的内部构成
 * @author shkstart  shkstart@126.com
 * @create 2020  23:39
 */
public class MethodInnerStrucTest extends Object implements Comparable,Serializable {
    //属性
    public int num = 10;
    private static String str = "测试方法的内部结构";
    //构造器
    //方法
    public void test1(){
        int count = 20;
        System.out.println("count = " + count);
    }
    public static int test2(int cal){
        int result = 0;
        try {
            int value = 30;
            result = value / cal;
        } catch (Exception e) {
            e.printStackTrace();
        }
        return result;
    }

    @Override
    public int compareTo(String o) {
        return 0;
    }
}

执行javap命令查看字节码文件,-p参数表示要把权限比较小(private)的字段或方法的信息显示出来,> test.txt表示将结果保存在当前路径的test.txt文件

字节码文件经过类加载器加载到运行时数据区,里边的信息都会加载方法区

深入理解JVM底层原理——方法区_第15张图片

深入理解JVM底层原理——方法区_第16张图片

下图是构造方法,即使没有显示声明也有默认构造方法,在方法区,构造方法也是方法

深入理解JVM底层原理——方法区_第17张图片

深入理解JVM底层原理——方法区_第18张图片

agrs_size=1表示参数大小,由于这个方法没有参数,所以只有一个默认参数this,locals=2表示局部变量表长度

深入理解JVM底层原理——方法区_第19张图片

深入理解JVM底层原理——方法区_第20张图片

代码举例:

深入理解JVM底层原理——方法区_第21张图片

non-final的类变量

  • 静态变量和类关联在一起,随着类的加载而加载,它们成为类数据在逻辑上的一部分。
  • 类变量被类的所有实例共享,即使没有类实例时你也可以访问它。

例:

package com.atguigu.java;

/**
 * non-final的类变量
 * @author shkstart  shkstart@126.com
 * @create 2020  20:37
 */
public class MethodAreaTest {
    public static void main(String[] args) {
        Order order = null;
        order.hello(); // 不会发生空指针异常
        System.out.println(order.count);
    }
}

class Order {
    public static int count = 1;
    public static final int number = 2;


    public static void hello() {
        System.out.println("hello!");
    }
}

补充说明:全局常量

被声明为final的类变量的处理方法则不同,每个全局常量在编译的时候就会被分配了。

深入理解JVM底层原理——方法区_第22张图片

prepare阶段会对静态变量进行初始化,如int类型就复制为0,在初始化阶段()才会赋值为既定值,而声明为final的在prepare阶段(或者说在编译的时候)直接就赋既定值了

运行时常量池VS常量池

深入理解JVM底层原理——方法区_第23张图片

  • 方法区,内部包含了运行时常量池。
  • 字节码文件,内部包含了常量池。
  • 要弄清楚方法区,需要理解清除ClassFile,因为加载类的信息都在方法区 。
  • 要弄清楚方法区的运行时常量池,需要理解清除ClassFile中的常量池。

https://docs.oracle.com/javase/specs/jvms/se8/html/jvms-4.html

如下:

深入理解JVM底层原理——方法区_第24张图片

深入理解JVM底层原理——方法区_第25张图片

一个有效的字节码文件中除了包含类的版本信息、字段、方法以及接口等描述信息外,还包含一项信息那就是常量池(Constant Pool Table),包括各种字面量和对类型、域和方法的符号引用。

为什么需要常量池?

一个java源文件中的类、接口,编译后产生一个字节码文件。而Java中的字节码需要数据支持,通常这种数据会很大以至于不能直接存到字节码里,换另一种方式,可以存到常量池,这个字节码包含了指向常量池的引用。在动态链接的时候会用到运行时常量池,之前有介绍。

比如:如下的代码:

深入理解JVM底层原理——方法区_第26张图片

虽然只有194字节,但是里面却使用了String、System、、PrintStream及Object等结构。这里代码量其实已经很小了。如果代码多,引用到的结构会更多!这里就需要常量池了! 

可以说是将一些常用的公共的类型、值做为符号出现,然后根据符号引用,在使用的时候将符号引用转换为直接引用。

下图即为符号引用示例:

深入理解JVM底层原理——方法区_第27张图片

深入理解JVM底层原理——方法区_第28张图片

小结:

        常量池,可以看做是一张表,虚拟机指令根据这张常量表找到要执行的类名、方法名、参数类型、字面量等类型。

运行时常量池

  • 运行时常量池(Runtime Constant Pool)是方法区的一部分。
  • 常量池表(Constant Pool Table)是Class文件的一部分,用于存放编译期生成的各种字面量和符号引用这部分内容将在类加载后存放到方法区的运行时常量池中
  • 运行时常量池,在加载类型和接口到虚拟机后,就会创建对应的运行时常量池。
  • JVM为每个已加载的类型(类或接口)都维护一个常量池。池中的数据项像数组项一样,是通过索引访问的。
  • 运行时常量池中包括多种不同的常量,包括编译期就已经明确的数值字面量,也包括到运行期解析后才能够获得的方法或者字段引用。此时不再是常量池中的符号地址了,这里换为真实地址。
    • 运行时常量池,相对于class文件常量池的另一种重要特征是:具备动态性。
  • 运行时常量池类似于传统编程语言中的符号表(symbol table),但是它所包含的数据却比符号表要更加丰富一些。
  • 当创建类或接口运行时常量池时,如果构造运行时常量池所需的内存空间超过了方法区所能提供的最大值,则JVM会抛出OutOfMemoryError异常。

字节码文件的常量池经过类加载器子系统加载到方法区就是运行时常量池

5、方法区的使用举例

深入理解JVM底层原理——方法区_第29张图片

package com.atguigu.java1;

/**
 * @author shkstart  shkstart@126.com
 * @create 2020  14:28
 */
public class MethodAreaDemo {
    public static void main(String[] args) {
        int x = 500;
        int y = 100;
        int a = x / y;
        int b = 50;
        System.out.println(a + b);
    }
}

编译后通过javap -v -p MethodAreaDemo.class > test.txt 查看字节码文件

执行流程:

深入理解JVM底层原理——方法区_第30张图片

深入理解JVM底层原理——方法区_第31张图片

深入理解JVM底层原理——方法区_第32张图片

深入理解JVM底层原理——方法区_第33张图片

深入理解JVM底层原理——方法区_第34张图片

深入理解JVM底层原理——方法区_第35张图片

后续的找ppt不全,用文字说明即可

6、方法区的演进细节

  1. 首先明确:只有HotSpot才有永久代。 BEA JRockit、IBM J9等来说,是不存在永久代的概念的。原则上如何实现方法区属于虚拟机实现细节,不受《Java虚拟机规范》管束,并不要求统一。
  2. HotSpot中方法区的变化:

深入理解JVM底层原理——方法区_第36张图片

深入理解JVM底层原理——方法区_第37张图片

深入理解JVM底层原理——方法区_第38张图片

深入理解JVM底层原理——方法区_第39张图片

永久代为什么要被元空间替换:

深入理解JVM底层原理——方法区_第40张图片

  • 随着Java 8的到来,HotSpot VM中再也见不到永久代了。但是这并不意味着类的元数据信息也消失了。这些数据被移到一个与堆不相连的本地内存区域,这个区域叫做元空间(Metaspace)
  • 由于类的元数据分配在本地内存中,元空间的最大可分配空间就是系统可用内存空间
  • 这项改动是很有必要的,原因有:
    • 永久代设置空间大小是很难确定的。——》在某些场景下,如果动态加载类过多,容易产生Perm区的OOM。比如某个实际Web工程中,因为功能点比较多,在运行过程中,要不断动态加载很多类,经常出现致命错误。(“Exception in thread 'dubbo client x.x connector' java.lang.OutOfMemoryError:PermGen space”),而元空间和永久代之间最大的区别在于:元空间并不在虚拟机中,而是使用本地内存。因此,默认情况下,元空间的大小仅受本地内存限制
    • 对永久代进行调优是很困难的。

StringTable字符串常量池

StringTable为什么要调整?

        jdk7中将StringTble放到了堆空间中。因为永久代的回收效率很低,在full gc的时候才会触发。而full gc是老年代空间不足、永久代不足时才会触发。这就导致StringTable回收效率不高。而我们开发中会有大量的字符串被创建,回收效率低,导致永久代内存不足。放在堆里,能及时回收内存。

静态变量放在哪里?

看下面两段代码:

package com.atguigu.java1;

/**
 * 结论:
 * 静态引用对应的对象实体始终都存在堆空间
 *
 * jdk7:
 * -Xms200m -Xmx200m -XX:PermSize=300m -XX:MaxPermSize=300m -XX:+PrintGCDetails
 * jdk 8:
 * -Xms200m -Xmx200m -XX:MetaspaceSize=300m -XX:MaxMetaspaceSize=300m -XX:+PrintGCDetails
 * @author shkstart  shkstart@126.com
 * @create 2020  21:20
 */
public class StaticFieldTest {
    private static byte[] arr = new byte[1024 * 1024 * 100];//100MB

    public static void main(String[] args) {
        System.out.println(StaticFieldTest.arr);

//        try {
//            Thread.sleep(1000000);
//        } catch (InterruptedException e) {
//            e.printStackTrace();
//        }
    }
}

JDK7:static变量指向的对象实体是new出来的,所以存在堆中

深入理解JVM底层原理——方法区_第41张图片

JDK8:同样放在老年代

深入理解JVM底层原理——方法区_第42张图片

package com.atguigu.java1;

/**
 * 《深入理解Java虚拟机》中的案例:
 * staticObj、instanceObj、localObj存放在哪里?
 * @author shkstart  shkstart@126.com
 * @create 2020  11:39
 */
public class StaticObjTest {
    static class Test {
        static ObjectHolder staticObj = new ObjectHolder();
        ObjectHolder instanceObj = new ObjectHolder();

        void foo() {
            ObjectHolder localObj = new ObjectHolder();
            System.out.println("done");
        }
    }

    private static class ObjectHolder {
    }

    public static void main(String[] args) {
        Test test = new StaticObjTest.Test();
        test.foo();
    }
}

深入理解JVM底层原理——方法区_第43张图片

7、方法区的垃圾回收

有些人认为方法区(如HotSpot虚拟机中的元空间或者永久代)是没有垃圾收集行为的,其实不然。《Java虚拟机规范》对方法区的约束是非常宽松的,提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在(如JDK 11时期的ZGC收集器就不支持类卸载)。

一般来说这个区域的回收效果比较难令人满意,尤其是类型的卸载,条件相当苛刻但是这部分区域的回收有时又确实是必要的。以前Sun公司的Bug列表中,层出现过若干个严重的Bug就是由于低版本HotSpot虚拟机堆此区域未完全回收而导致内存泄漏。

方法区的垃圾收集主要回收两部分内容:常量池中废弃的常量和不再使用的类型

  • 先来说说方法区内常量池之中主要存放的两大类常量:字面量和符号引用。字面量比较接近Java语言层次的常量概念,如文本字符串、被声明为final的常量值等。而符号引用则属于编译原理方面的概念,包括下面三类常量:
    • 1、类和接口的全限定名
    • 2、字段的名称和描述符
    • 3、方法的名称和描述符
  • HotSpot虚拟机对常量池的回收策略是很明确的,只要常量池中的常量没有被任何地方引用,就可以被回收
  • 回收废弃常量与回收Java堆中的对象非常类似。
  • 判定一个常量是否“废弃”还是相对简单,而要判定一个类型是否属于“不再被使用的类”的条件就比较苛刻了。需要同时满足下面三个条件:
    • 该类所有的实例都已被回收,也就是Java堆中不存在该类及其任何派生子类的实例。
    • 加载该类型的类加载器已经被回收,这个条件除非是经过精心设计的可替换类加载器的场景,如OSGi、JSP的重加载等,否则通常是很难达成的。
    • 该类对应的java.lang.Class对象没有在任何地方被引用,无法再任何地方通过反射访问该类的方法。
  • Java虚拟机被允许堆满足上述三个条件的无用类进行回收,这里说的仅仅是“被允许”,而并不是和对象一样,没有引用了就必然会回收。关于是否要对类型进行回收,HotSpot虚拟机提供了-Xnoclassgc参数进行控制,还可以使用-verbose:class以及-XX:+TraceClass-Loading、-XX:+TraceClassUnLoading查看类加载和卸载信息
  • 在大量使用反射、动态代理、CGLib等字节码框架,动态生成JSP以及OSGi这类频繁自定义类加载器的场景中,通常都需要Java虚拟机具备类型卸载的能力,以保证不会堆方法区造成过大的内存压力

8、总结

深入理解JVM底层原理——方法区_第44张图片

常见面试题

深入理解JVM底层原理——方法区_第45张图片

深入理解JVM底层原理——方法区_第46张图片

ItVuer - 免责声明 - 关于我们 - 联系我们

本网站信息来源于互联网,如有侵权请联系:561261067@qq.com

桂ICP备16001015号