资料来源:https://www.bilibili.com/video/BV1PJ411n7xZ?p=110&spm_id_from=pageDriver
https://github.com/youthlql/JavaYouth
https://gitee.com/moxi159753/LearningNotes/tree/master/JVM
https://blog.csdn.net/qq_42449963/article/details/113965228
https://blog.csdn.net/qiruibbb/article/details/106818531
https://www.processon.com/view/link/5eea141cf346fb1ae56a44e7

第一章 JVM与Java体系结构

你是否也遇到过这些问题?

  1. 运行着的线上系统突然卡死,系统无法访问,甚至直接OOM!
  2. 想解决线上JVM GC问题,但却无从下手。
  3. 新项目上线,对各种JVM参数设置一脸茫然,直接默认吧然后就JJ了。
  4. 每次面试之前都要重新背一遍JVM的一些原理概念性的东西,然而面试官却经常问你在实际项目中如何调优VM参数,如何解决GC、OOM等问题,一脸懵逼。

image.png

1、Java与JVM简介

一些有一定工作经验的开发人员,打心眼儿里觉得SSM、微服务等上层技术才是重点,基础技术并不重要,这其实是一种本末倒置的“病态”。
如果我们把核心类库的API比做数学公式的话,那么Java虚拟机的知识就好比公式的推导过程。
计算机系统体系对我们来说越来越远,在不了解底层实现方式的前提下,通过高级语言很容易编写程序代码。但事实上计算机并不认识高级语言。
image.png

1.1 Java VS C++

  1. 垃圾收集机制为我们打理了很多繁琐的工作,大大提高了开发的效率,但是,垃圾收集也不是万能的,懂得JVM内部的内存结构、工作机制,是设计高扩展性应用和诊断运行时问题的基础,也是Java工程师进阶的必备能力。
  2. C++语言需要程序员自己来分配内存和回收内存,对于高手来说可能更加舒服,但是对于普通开发者,如果技术实力不够,很容易造成内存泄漏。而Java全部交给JVM进行内存分配和回收,这也是一种趋势,减少程序员的工作量。

image.png

1.2 Java生态圈

Java是目前应用最为广泛的软件开发平台之一。随着Java以及Java社区的不断壮大Java 也早已不再是简简单单的一门计算机语言了,它更是一个平台、一种文化、一个社区。

  1. 作为一个平台,Java虚拟机扮演着举足轻重的作用
    • Groovy、Scala、JRuby、Kotlin等都是Java平台的一部分
  2. 作为一种文化,Java几乎成为了“开源”的代名词。
    • 第三方开源软件和框架。如Tomcat、Struts,MyBatis,Spring等。
    • 就连JDK和JVM自身也有不少开源的实现,如openJDK、Harmony。
  3. 作为一个社区,Java拥有全世界最多的技术拥护者和开源社区支持,有数不清的论坛和资料。从桌面应用软件、嵌入式开发到企业级应用、后台服务器、中间件,都可以看到Java的身影。其应用形式之复杂、参与人数之众多也令人咋舌。

    1.3 Java - 跨平台的语言

    第01章_Java语言的跨平台性.jpg

    1.4 JVM - 跨语言的平台

    第01章_JVM跨语言的平台.jpg

  4. 随着Java7的正式发布,Java虚拟机的设计者们通过JSR-292规范基本实现在Java虚拟机平台上运行非Java语言编写的程序。

  5. Java虚拟机根本不关心运行在其内部的程序到底是使用何种编程语言编写的,它只关心“字节码”文件。也就是说Java虚拟机拥有语言无关性,并不会单纯地与Java语言“终身绑定”,只要其他编程语言的编译结果满足并包含Java虚拟机的内部指令集、符号表以及其他的辅助信息,它就是一个有效的字节码文件,就能够被虚拟机所识别并装载运行。
  6. Java不是最强大的语言,但是JVM是最强大的虚拟机

    1.4 字节码

  7. 我们平时说的java字节码,指的是用java语言编译成的字节码。准确的说任何能在jvm平台上执行的字节码格式都是一样的。所以应该统称为:jvm字节码

  8. 不同的编译器,可以编译出相同的字节码文件,字节码文件也可以在不同的JVM上运行。
  9. Java虚拟机与Java语言并没有必然的联系,它只与特定的二进制文件格式——Class文件格式所关联,Class文件中包含了Java虚拟机指令集(或者称为字节码、Bytecodes)和符号表,还有一些其他辅助信息。

    1.5 多语言混合编程

  10. Java平台上的多语言混合编程正成为主流,通过特定领域的语言去解决特定领域的问题是当前软件开发应对日趋复杂的项目需求的一个方向。

  11. 试想一下,在一个项目之中,并行处理用Clojure语言编写,展示层使用JRuby/Rails,中间层则是Java,每个应用层都将使用不同的编程语言来完成,而且,接口对每一层的开发者都是透明的,各种语言之间的交互不存在任何困难,就像使用自己语言的原生API一样方便,因为它们最终都运行在一个虚拟机之上。
  12. 对这些运行于Java虚拟机之上、Java之外的语言,来自系统级的、底层的支持正在迅速增强,以JSR-292为核心的一系列项目和功能改进(如DaVinci Machine项目、Nashorn引擎、InvokeDynamic指令、java.lang.invoke包等),推动Java虚拟机从“Java语言的虚拟机”向 “多语言虚拟机”的方向发展。

    1.6 如何真正搞懂JVM

  13. Java虚拟机非常复杂,要想真正理解它的工作原理,最好的方式就是自己动手编写一个!

  14. 自己动手写一个Java虚拟机,难吗?
  15. 天下事有难易乎?为之,则难者亦易矣;不为,则易者亦难矣

    2、Java发展重大事件

  • 1990年,在Sun计算机公司中,由Patrick Naughton、MikeSheridan及James Gosling领导的小组Green Team,开发出的新的程序语言,命名为Oak,后期命名为Java
  • 1995年,Sun正式发布Java和HotJava产品,Java首次公开亮相。
  • 1996年1月23日Sun Microsystems发布了JDK 1.0。
  • 1998年,JDK1.2版本发布。同时,Sun发布了JSP/Servlet、EJB规范,以及将Java分成了J2EE、J2SE和J2ME。这表明了Java开始向企业、桌面应用和移动设备应用3大领域挺进。
  • 2000年,JDK1.3发布,Java HotSpot Virtual Machine正式发布,成为Java的默认虚拟机。
  • 2002年,JDK1.4发布,古老的Classic虚拟机退出历史舞台。
  • 2003年年底,Java平台的scala正式发布,同年Groovy也加入了Java阵营。
  • 2004年,JDK1.5发布。同时JDK1.5改名为JavaSE5.0。
  • 2006年,JDK6发布。同年,Java开源并建立了OpenJDK。顺理成章,Hotspot虚拟机也成为了OpenJDK中的默认虚拟机。
  • 2007年,Java平台迎来了新伙伴Clojure。
  • 2008年,oracle收购了BEA,得到了JRockit虚拟机。
  • 2009年,Twitter宣布把后台大部分程序从Ruby迁移到Scala,这是Java平台的又一次大规模应用。
  • 2010年,Oracle收购了Sun,获得Java商标和最真价值的HotSpot虚拟机。此时,Oracle拥有市场占用率最高的两款虚拟机HotSpot和JRockit,并计划在未来对它们进行整合:HotRockit。JCP组织管理Java语言
  • 2011年,JDK7发布。在JDK1.7u4中,正式启用了新的垃圾回收器G1。
  • 2017年,JDK9发布。将G1设置为默认GC,替代CMS
  • 同年,IBM的J9开源,形成了现在的Open J9社区
  • 2018年,Android的Java侵权案判决,Google赔偿Oracle计88亿美元
  • 同年,Oracle宣告JavagE成为历史名词JDBC、JMS、Servlet赠予Eclipse基金会
  • 同年,JDK11发布,LTS版本的JDK,发布革命性的ZGC,调整JDK授权许可
  • 2019年,JDK12发布,加入RedHat领导开发的Shenandoah GC

    Open JDK和Oracle JDK

    image.png

  • 在JDK11之前,Oracle JDK中还会存在一些Open JDK中没有的,闭源的功能。但在JDK11中,我们可以认为Open JDK和Oracle JDK代码实质上已经达到完全一致的程度了。

  • 主要的区别就是两者更新周期不一样

    3、虚拟机和Java虚拟机

    3.1 虚拟机概念

    所谓虚拟机(Virtual Machine),就是一台虚拟的计算机。它是一款软件,用来执行一系列虚拟计算机指令。大体上,虚拟机可以分为系统虚拟机和程序虚拟机

    • 大名鼎鼎的Virtual Box,VMware就属于系统虚拟机,它们完全是对物理计算机硬件的仿真(模拟),提供了一个可运行完整操作系统的软件平台。
    • 程序虚拟机的典型代表就是Java虚拟机,它专门为执行单个计算机程序而设计,在Java虚拟机中执行的指令我们称为Java字节码指令。

无论是系统虚拟机还是程序虚拟机,在上面运行的软件都被限制于虚拟机提供的资源中。

3.2 Java虚拟机

  1. Java虚拟机是一台执行Java字节码的虚拟计算机,它拥有独立的运行机制,其运行的Java字节码也未必由Java语言编译而成。
  2. JVM平台的各种语言可以共享Java虚拟机带来的跨平台性、优秀的垃圾回器,以及可靠的即时编译器。
  3. Java技术的核心就是Java虚拟机(JVM,Java Virtual Machine),因为所有的Java程序都运行在Java虚拟机内部。
  4. 作用:Java虚拟机就是二进制字节码的运行环境,负责装载字节码到其内部,解释/编译为对应平台上的机器指令执行。每一条Java指令,Java虚拟机规范中都有详细定义,如怎么取操作数,怎么处理操作数,处理结果放在哪里。
  5. 特点:

    • 一次编译,到处运行
    • 自动内存管理,降低内存溢出和内存泄漏的风险
    • 自动垃圾回收功能

      3.3 JVM的位置

      JVM是运行在操作系统之上的,它与硬件没有直接的交互
      image.png
      image.png

      3.4 Google的Android系统结构

      image.png

      4、JVM的整体结构

    1. HotSpot VM是目前市面上高性能虚拟机的代表作之一。
    2. 它采用解释器与即时编译器并存的架构。
    3. 在今天,Java程序的运行性能早已脱胎换骨,已经达到了可以和C/C++程序一较高下的地步。

image.png

5、Java代码执行流程

凡是能生成被Java虚拟机所能解释、运行的字节码文件,那么理论上我们就可以自己设计一套语言了
image.png
image.png

6、JVM的架构模型

Java编译器输入的指令流基本上是一种基于栈的指令集架构,另外一种指令集架构则是基于寄存器的指令集架构

6.1基于栈的指令集架构

基于栈式架构的特点:

  1. 设计和实现更简单,适用于资源受限的系统;
  2. 避开了寄存器的分配难题:使用零地址指令方式分配
  3. 指令流中的指令大部分是零地址指令,其执行过程依赖于操作栈。指令集更小,编译器容易实现
  4. 不需要硬件支持,可移植性更好,更好实现跨平台

    6.2 基于寄存器的指令级架构

    基于寄存器架构的特点:

  5. 典型的应用是x86的二进制指令集:比如传统的PC以及Android的Davlik虚拟机。

  6. 指令集架构则完全依赖硬件,与硬件的耦合度高,可移植性差
  7. 性能优秀和执行更高效
  8. 花费更少的指令去完成一项操作
  9. 在大部分情况下,基于寄存器架构的指令集往往都以一地址指令、二地址指令和三地址指令为主,而基于栈式架构的指令集却是以零地址指令为主

    6.3 两种架构的举例

    同样执行2+3这种逻辑操作,其指令分别如下:
  • 基于栈的计算流程(以Java虚拟机为例):需要8个指令

    1. iconst_2 //常量2入栈
    2. istore_1
    3. iconst_3 // 常量3入栈
    4. istore_2
    5. iload_1
    6. iload_2
    7. iadd //常量2/3出栈,执行相加
    8. istore_0 // 结果5入栈

    image.png

  • 而基于寄存器的计算流程:需要2个指令

    1. mov eax,2 //将eax寄存器的值设为1
    2. add eax,3 //使eax寄存器的值加3

    6.4 JVM架构总结

  1. 由于跨平台性的设计,Java的指令都是根据栈来设计的。不同平台CPU架构不同,所以不能设计为基于寄存器的。栈的优点:跨平台,指令集小,编译器容易实现,缺点是性能比寄存器差一些。
  2. 时至今日,尽管嵌入式平台已经不是Java程序的主流运行平台了(准确来说应该是HotSpot VM的宿主环境已经不局限于嵌入式平台了),那么为什么不将架构更换为基于寄存器的架构呢?
    • 因为基于栈的架构跨平台性好、指令集小,虽然相对于基于寄存器的架构来说,基于栈的架构编译得到的指令更多,执行性能也不如基于寄存器的架构好,但考虑到其跨平台性与移植性,我们还是选用栈的架构

      7、JVM的生命周期

      7.1 虚拟机的启动
      Java虚拟机的启动是通过引导类加载器(bootstrap class loader)创建一个初始类(initial class)来完成的,这个类是由虚拟机的具体实现指定的。

7.2 虚拟机的执行

  1. 一个运行中的Java虚拟机有着一个清晰的任务:执行Java程序
  2. 程序开始执行时他才运行,程序结束时他就停止
  3. 执行一个所谓的Java程序的时候,真真正正在执行的是一个叫做Java虚拟机的进程

7.3 虚拟机的退出
有如下的几种情况:

  1. 程序正常执行结束
  2. 程序在执行过程中遇到了异常或错误而异常终止
  3. 由于操作系统用现错误而导致Java虚拟机进程终止
  4. 某线程调用Runtime类或System类的exit()方法,或Runtime类的halt()方法,并且Java安全管理器也允许这次exit()或halt()操作。
  5. 除此之外,JNI(Java Native Interface)规范描述了用JNI Invocation API来加载或卸载 Java虚拟机时,Java虚拟机的退出情况。

    8、JVM发展历程

    Sun Classic VM
  1. 早在1996年Java1.0版本的时候,Sun公司发布了一款名为sun classic VM的Java虚拟机,它同时也是世界上第一款商用Java虚拟机,JDK1.4时完全被淘汰。
  2. 这款虚拟机内部只提供解释器,没有即时编译器,因此效率比较低。【即时编译器会把热点代码的本地机器指令缓存起来,那么以后使用热点代码的时候,效率就比较高】
  3. 如果使用JIT编译器,就需要进行外挂。但是一旦使用了JIT编译器,JIT就会接管虚拟机的执行系统。解释器就不再工作,解释器和编译器不能配合工作。
    • 我们将字节码指令翻译成机器指令也是需要花时间的,如果只使用JIT,就需要把所有字节码指令都翻译成机器指令,就会导致翻译时间过长,也就是说在程序刚启动的时候,等待时间会很长。
    • 而解释器就是走到哪,解释到哪。
  4. 现在Hotspot内置了此虚拟机。

Exact VM

  1. 为了解决上一个虚拟机问题,jdk1.2时,Sun提供了此虚拟机。
  2. Exact Memory Management:准确式内存管理
    • 也可以叫Non-Conservative/Accurate Memory Management
    • 虚拟机可以知道内存中某个位置的数据具体是什么类型。
  3. 具备现代高性能虚拟机的维形
    • 热点探测(寻找出热点代码进行缓存)
    • 编译器与解释器混合工作模式
  4. 只在Solaris平台短暂使用,其他平台上还是classic vm,英雄气短,终被Hotspot虚拟机替换

HotSpot VM(重点)

  1. HotSpot历史
    • 最初由一家名为“Longview Technologies”的小公司设计
    • 1997年,此公司被Sun收购;2009年,Sun公司被甲骨文收购。
    • JDK1.3时,HotSpot VM成为默认虚拟机
  2. 目前Hotspot占有绝对的市场地位,称霸武林
    • 不管是现在仍在广泛使用的JDK6,还是使用比例较多的JDK8中,默认的虚拟机都是HotSpot
    • Sun/oracle JDK和openJDK的默认虚拟机
    • 因此本课程中默认介绍的虚拟机都是HotSpot,相关机制也主要是指HotSpot的GC机制。(比如其他两个商用虚机都没有方法区的概念)
  3. 从服务器、桌面到移动端、嵌入式都有应用。
  4. 名称中的HotSpot指的就是它的热点代码探测技术。
    • 通过计数器找到最具编译价值代码,触发即时编译或栈上替换
    • 通过编译器与解释器协同工作,在最优化的程序响应时间与最佳执行性能中取得平衡

JRockit(商用三大虚拟机之一)

  1. 专注于服务器端应用:它可以不太关注程序启动速度,因此JRockit内部不包含解析器实现,全部代码都靠即时编译器编译后执行。
  2. 大量的行业基准测试显示,JRockit JVM是世界上最快的JVM:使用JRockit产品,客户已经体验到了显著的性能提高(一些超过了70%)和硬件成本的减少(达50%)。
  3. 优势:全面的Java运行时解决方案组合
    • JRockit面向延迟敏感型应用的解决方案JRockit Real Time提供以毫秒或微秒级的JVM响应时间,适合财务、军事指挥、电信网络的需要
    • Mission Control服务套件,它是一组以极低的开销来监控、管理和分析生产环境中的应用程序的工具。
  4. 2008年,JRockit被Oracle收购。
  5. Oracle表达了整合两大优秀虚拟机的工作,大致在JDK8中完成。整合的方式是在HotSpot的基础上,移植JRockit的优秀特性。
  6. 高斯林:目前就职于谷歌,研究人工智能和水下机器人

IBM的J9(商用三大虚拟机之一)

  1. 全称:IBM Technology for Java Virtual Machine,简称IT4J,内部代号:J9
  2. 市场定位与HotSpot接近,服务器端、桌面应用、嵌入式等多用途VM广泛用于IBM的各种Java产品。
  3. 目前,有影响力的三大商用虚拟机之一,也号称是世界上最快的Java虚拟机。
  4. 2017年左右,IBM发布了开源J9VM,命名为openJ9,交给Eclipse基金会管理,也称为Eclipse OpenJ9
  5. OpenJDK -> 是JDK开源了,包括了虚拟机

KVM和CDC/CLDC Hotspot

  1. Oracle在Java ME产品线上的两款虚拟机为:CDC/CLDC HotSpot Implementation VM
  2. KVM(Kilobyte)是CLDC-HI早期产品
  3. 目前移动领域地位尴尬,智能机被Android和iOS二分天下。
  4. KVM简单、轻量、高度可移植,面向更低端的设备上还维持自己的一片市场
    • 智能控制器、传感器
    • 老人手机、经济欠发达地区的功能手机
  5. 所有的虚拟机的原则:一次编译,到处运行。

Azul VM

  1. 前面三大“高性能Java虚拟机”使用在通用硬件平台上
  2. 这里Azul VW和BEA Liquid VM是与特定硬件平台绑定、软硬件配合的专有虚拟机:高性能Java虚拟机中的战斗机。
  3. Azul VM是Azul Systems公司在HotSpot基础上进行大量改进,运行于Azul Systems公司的专有硬件Vega系统上的Java虚拟机。
  4. 每个Azul VM实例都可以管理至少数十个CPU和数百GB内存的硬件资源,并提供在巨大内存范围内实现可控的GC时间的垃圾收集器、专有硬件优化的线程调度等优秀特性。
  5. 2010年,Azul Systems公司开始从硬件转向软件,发布了自己的Zing JVM,可以在通用x86平台上提供接近于Vega系统的特性。

Liquid VM

  1. 高性能Java虚拟机中的战斗机。
  2. BEA公司开发的,直接运行在自家Hypervisor系统上
  3. Liquid VM即是现在的JRockit VE(Virtual Edition)。Liquid VM不需要操作系统的支持,或者说它自己本身实现了一个专用操作系统的必要功能,如线程调度、文件系统、网络支持等
  4. 随着JRockit虚拟机终止开发,Liquid vM项目也停止了。

Apache Marmony

  1. Apache也曾经推出过与JDK1.5和JDK1.6兼容的Java运行平台Apache Harmony。
  2. 它是IElf和Intel联合开发的开源JVM,受到同样开源的Open JDK的压制,Sun坚决不让Harmony获得JCP认证,最终于2011年退役,IBM转而参与OpenJDK
  3. 虽然目前并没有Apache Harmony被大规模商用的案例,但是它的Java类库代码吸纳进了Android SDK。

Micorsoft JVM

  1. 微软为了在IE3浏览器中支持Java Applets,开发了Microsoft JVM。
  2. 只能在window平台下运行。但确是当时Windows下性能最好的Java VM。
  3. 1997年,Sun以侵犯商标、不正当竞争罪名指控微软成功,赔了Sun很多钱。微软WindowsXP SP3中抹掉了其VM。现在Windows上安装的jdk都是HotSpot。

Taobao JVM

  1. 由AliJVM团队发布。阿里,国内使用Java最强大的公司,覆盖云计算、金融、物流、电商等众多领域,需要解决高并发、高可用、分布式的复合问题。有大量的开源产品。
  2. 基于OpenJDK开发了自己的定制版本AlibabaJDK,简称AJDK。是整个阿里Java体系的基石。
  3. 基于OpenJDK Hotspot VM发布的国内第一个优化、深度定制且开源的高性能服务器版Java虚拟机。
    • 创新的GCIH(GCinvisible heap)技术实现了off-heap,即将生命周期较长的Java对象从heap中移到heap之外,并且GC不能管理GCIH内部的Java对象,以此达到降低GC的回收频率和提升GC的回收效率的目的
    • GCIH中的对象还能够在多个Java虚拟机进程中实现共享
    • 使用crc32指令实现JvM intrinsic降低JNI的调用开销
    • PMU hardware的Java profiling tool和诊断协助功能
    • 针对大数据场景的ZenGC
  4. taobao vm应用在阿里产品上性能高,硬件严重依赖inte1的cpu,损失了兼容性,但提高了性能
  • 目前已经在淘宝、天猫上线,把Oracle官方JVM版本全部替换了。

Dalvik VM

  1. 谷歌开发的,应用于Android系统,并在Android2.2中提供了JIT,发展迅猛。
  2. Dalvik VM只能称作虚拟机,而不能称作“Java虚拟机”,它没有遵循 Java虚拟机规范
  3. 不能直接执行Java的Class文件
  4. 基于寄存器架构,不是jvm的栈架构。
  5. 执行的是编译以后的dex(Dalvik Executable)文件。执行效率比较高。
  • 它执行的dex(Dalvik Executable)文件可以通过class文件转化而来,使用Java语法编写应用程序,可以直接使用大部分的Java API等。
  1. Android 5.0使用支持提前编译(Ahead of Time Compilation,AoT)的ART VM替换Dalvik VM。

Graal VM(未来虚拟机)

  1. 2018年4月,Oracle Labs公开了GraalvM,号称 “Run Programs Faster Anywhere”,勃勃野心。与1995年java的”write once,run anywhere”遥相呼应。
  2. GraalVM在HotSpot VM基础上增强而成的跨语言全栈虚拟机,可以作为“任何语言”的运行平台使用。语言包括:Java、Scala、Groovy、Kotlin;C、C++、Javascript、Ruby、Python、R等
  3. 支持不同语言中混用对方的接口和对象,支持这些语言使用已经编写好的本地库文件
  4. 工作原理是将这些语言的源代码或源代码编译后的中间格式,通过解释器转换为能被Graal VM接受的中间表示。Graal VM提供Truffle工具集快速构建面向一种新语言的解释器。在运行时还能进行即时编译优化,获得比原生编译器更优秀的执行效率。
  5. 如果说HotSpot有一天真的被取代,Graalvm希望最大。但是Java的软件生态没有丝毫变化。

总结
具体JVM的内存结构,其实取决于其实现,不同厂商的JVM,或者同一厂商发布的不同版本,都有可能存在一定差异。主要以Oracle HotSpot VM为默认虚拟机。

第二章 类加载子系统

1、内存结构概述

image.png
第02章_JVM架构-中.jpg
如果自己想手写一个Java虚拟机的话,主要考虑哪些结构呢?

  1. 类加载器
  2. 执行引擎

    2、类加载器与类的加载过程

    2.1 类加载器子系统作用

  3. 类加载器子系统负责从文件系统或者网络中加载Class文件,class文件在文件开头有特定的文件标识

  4. ClassLoader只负责class文件的加载,至于它是否可以运行,则由Execution Engine(执行引擎)决定
  5. 加载的类信息存放于一块称为方法区的内存空间。除了类的信息外,方法区中还会存放运行时常量池信息,可能还包括字符串字面量和数字常量(这部分常量信息是Class文件中常量池部分的内存映射)

image.png

2.2 类加载器ClassLoader角色

  1. class file(在下图中就是Car.class文件)存在于本地硬盘上,可以理解为设计师画在纸上的模板,而最终这个模板在执行的时候是要加载到JVM当中来根据这个文件实例化出n个一模一样的实例。
  2. class file加载到JVM中,被称为DNA元数据模板(在下图中就是内存中的Car Class),放在方法区。
  3. 在.class文件–>JVM–>最终成为元数据模板,此过程就要一个运输工具(类装载器Class Loader),扮演一个快递员的角色。

image.png

2.3 类的加载过程

image.png

  1. public class HelloLoader {
  2. public static void main(String[] args) {
  3. System.out.println("谢谢ClassLoader加载我....");
  4. System.out.println("你的大恩大德,我下辈子再报!");
  5. }
  6. }

它的加载过程是怎么样的呢?

  • 执行 main() 方法(静态方法)就需要先加载main方法所在类 HelloLoader
  • 加载成功,则进行链接、初始化等操作。完成后调用 HelloLoader 类中的静态方法 main
  • 加载失败则抛出异常

完整的加载流程图如下所示:
image.png

2.3.1 加载阶段

  1. 通过一个类的全限定名获取定义此类的二进制字节流
  2. 将这个字节流所代表的静态存储结构转化为方法区的运行时数据结构
  3. 在内存中生成一个代表这个类的java.lang.Class对象,作为方法区这个类的各种数据的访问入口

补充:加载.class文件的方式:

  1. 从本地系统中直接加载
  2. 通过网络获取,典型场景:Web Applet
  3. 从zip压缩包中读取,成为日后jar、war格式的基础
  4. 运行时计算生成,使用最多的是:动态代理技术
  5. 由其他文件生成,典型场景:JSP应用从专有数据库中提取.class文件,比较少见
  6. 从加密文件中获取,典型的防Class文件被反编译的保护措施

2.3.2 链接阶段

链接分为三个子阶段:验证 -> 准备 -> 解析

验证(Verify)
  1. 目的在于确保Class文件的字节流中包含信息符合当前虚拟机要求,保证被加载类的正确性,不会危害虚拟机自身安全
  2. 主要包括四种验证,文件格式验证,元数据验证,字节码验证,符号引用验证。

举例:使用 BinaryViewer软件查看字节码文件,其开头均为 CAFE BABE ,如果出现不合法的字节码文件,那么将会验证不通过。
image.png

准备(Prepare)
  1. 为类变量(static变量)分配内存并且设置该类变量的默认初始值,即零值
  2. 这里不包含用final修饰的static,因为final在编译的时候就会分配好了默认值,准备阶段会显式初始化
  3. 注意:这里不会为实例变量分配初始化,类变量会分配在方法区中,而实例变量是会随着对象一起分配到Java堆中

举例:变量a在准备阶段会赋初始值,但不是1,而是0,在初始化阶段会被赋值为 1

  1. public class HelloApp {
  2. private static int a = 1; // prepare准备环节:a = 0 ---> initial初始化环节: a = 1
  3. public static void main(String[] args) {
  4. System.out.println(a);
  5. }
  6. }

解析(Resolve)
  1. 将常量池内的符号引用转换为直接引用的过程
  2. 事实上,解析操作往往会伴随着JVM在执行完初始化之后再执行
  3. 符号引用就是一组符号来描述所引用的目标。符号引用的字面量形式明确定义在《java虚拟机规范》的class文件格式中。直接引用就是直接指向目标的指针、相对偏移量或一个间接定位到目标的句柄
  4. 解析动作主要针对类或接口、字段、类方法、接口方法、方法类型等。对应常量池中的CONSTANT Class info、CONSTANT Fieldref info、CONSTANT Methodref info等

符号引用:反编译 class 文件后可以查看符号引用,下面带# 的就是符号引用
image.png

2.3.3 初始化阶段

1、类的初始化时机

Java程序对类的使用方式分为:主动使用和被动使用。
主动使用分为以下七种情况:

  1. 创建类的实例
  2. 访问某个类或接口的静态变量,或者对该静态变量赋值
  3. 调用类的静态方法
  4. 反射(比如:Class.forName(“com.atguigu.Test”))
  5. 初始化一个类的子类
  6. Java虚拟机启动时被标明为启动类的类
  7. JDK7开始提供的动态语言支持:java.lang.invoke.MethodHandle实例的解析结果REF_getStatic、REF putStatic、REF_invokeStatic句柄对应的类没有初始化,则初始化

除了以上七种情况,其他使用Java类的方式都被看作是对类的被动使用,都不会导致类的初始化,即不会执行初始化阶段(不会调用 clinit() 方法和 init() 方法)

2、初始化clinit()
  1. 初始化阶段就是执行类构造器方法()的过程
  2. 此方法不需定义,是javac编译器自动收集类中的所有类变量的赋值动作和静态代码块中的语句合并而来。也就是说,当我们代码中包含static变量的时候,就会有clinit方法
  3. ()方法中的指令按语句在源文件中出现的顺序执行 ```java public class ClassInitTest {

    private static int num = 1;

    static{

    1. num = 2;
    2. number = 20;
    3. System.out.println(num);
    4. // System.out.println(number); //报错:非法的前向引用。即只能赋值,但不能调用

    }

    /**

    • 1、linking之prepare: number = 0 —> initial: 20 —> 10
    • 2、这里因为静态代码块出现在声明变量语句前面,所以之前被准备阶段为0的number变量会
    • 首先被初始化为20,再接着被初始化成10(这也是面试时常考的问题哦) */ private static int number = 10;

    public static void main(String[] args) {

    1. System.out.println(ClassInitTest.num); // 2
    2. System.out.println(ClassInitTest.number); // 10

    } }

: 0 iconst_1 1 putstatic #3 4 iconst_2 5 putstatic #3 8 bipush 20 // 先赋20 10 putstatic #5 13 getstatic #2 16 getstatic #3 19 invokevirtual #4 22 bipush 10 // 再赋10 24 putstatic #5 27 return

  1. **举例2:**当我们代码中包含static变量的时候,就会有clinit方法<br />**无static变量**<br />![image.png](https://cdn.nlark.com/yuque/0/2022/png/22523384/1650102060616-68c9049d-240e-4d52-93b6-d72a393cc6b2.png#clientId=u4f1dda55-230d-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=283&id=H10rC&margin=%5Bobject%20Object%5D&name=image.png&originHeight=685&originWidth=1628&originalType=url&ratio=1&rotation=0&showTitle=false&size=103950&status=done&style=none&taskId=u23ccdfdc-c33b-461c-8347-c07bcf84a28&title=&width=672)<br />加上**static 变量**之后,就会有clinit方法<br />![image.png](https://cdn.nlark.com/yuque/0/2022/png/22523384/1650102060727-56a7b3ab-cfbc-493f-8110-bdbf523fa8a9.png#clientId=u4f1dda55-230d-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=294&id=dGBnc&margin=%5Bobject%20Object%5D&name=image.png&originHeight=774&originWidth=1772&originalType=url&ratio=1&rotation=0&showTitle=false&size=130377&status=done&style=none&taskId=u0040da66-307f-4eab-8115-01e49329fba&title=&width=672)
  2. 4. **<clinit>()不同于类的构造器。(关联:构造器是虚拟机视角下的<init>())**
  3. 在构造器中:先将类变量a赋值为 10,再将局部变量赋值为 20<br />![image.png](https://cdn.nlark.com/yuque/0/2022/png/22523384/1650102061276-74367e0b-e438-442c-84de-1fd755fb730e.png#clientId=u4f1dda55-230d-4&crop=0&crop=0&crop=1&crop=1&from=paste&id=yMMSl&margin=%5Bobject%20Object%5D&name=image.png&originHeight=817&originWidth=1822&originalType=url&ratio=1&rotation=0&showTitle=false&size=145629&status=done&style=none&taskId=ub8d7ca4b-7029-489b-ab94-d68dd31a0da&title=)
  4. 5. **若该类具有父类,JVM会保证子类的<clinit>()执行前,父类的<clinit>()已经执行完毕**
  5. ![image.png](https://cdn.nlark.com/yuque/0/2022/png/22523384/1650121705212-29be4ab7-2242-4739-b25a-69e959d0c1a2.png#clientId=u20512407-04cd-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=682&id=hxGRW&margin=%5Bobject%20Object%5D&name=image.png&originHeight=682&originWidth=1335&originalType=binary&ratio=1&rotation=0&showTitle=false&size=82011&status=done&style=none&taskId=uf64b2967-ab81-4b22-ba07-72ad5fa182c&title=&width=1335)<br />如上代码,加载流程如下:
  6. - 首先,执行 main() 方法需要加载 ClinitTest1
  7. - 获取 Son.B 静态变量,需要加载 Son
  8. - Son 类的父类是 Father 类,所以需要先执行 Father 类的加载,再执行 Son 类的加载
  9. 6. **虚拟机必须保证一个类的<clinit>()方法在多线程下被同步加锁**
  10. ```java
  11. public class DeadThreadTest {
  12. public static void main(String[] args) {
  13. Runnable r = () -> {
  14. System.out.println(Thread.currentThread().getName() + "开始");
  15. DeadThread dead = new DeadThread();
  16. System.out.println(Thread.currentThread().getName() + "结束");
  17. };
  18. Thread t1 = new Thread(r, "线程1");
  19. Thread t2 = new Thread(r, "线程2");
  20. t1.start();
  21. t2.start();
  22. }
  23. }
  24. class DeadThread{
  25. static{
  26. if(true){
  27. System.out.println(Thread.currentThread().getName() + "初始化当前类");
  28. while(true){
  29. }
  30. }
  31. }
  32. }

image.png
程序卡死,分析原因:

  • 两个线程同时去加载 DeadThread 类,而DeadThread类中静态代码块中有一处死循环
  • 先加载 DeadThread 类的线程抢到了同步锁,然后在类的静态代码块中执行死循环,而另一个线程在等待同步锁的释放
  • 所以无论哪个线程先执行 DeadThread 类的加载,另外一个类也不会继续执行。(一个类只会被加载一次)

IDEA 中安装 JClassLib Bytecode viewer 插件,可以很方便的看字节码
image.png
image.png
image.png

3、类加载器的分类

3.1 概述

  1. JVM严格来讲支持两种类型的类加载器 。分别为引导类加载器(Bootstrap ClassLoader)和自定义类加载器(User-Defined ClassLoader)
  2. 从概念上来讲,自定义类加载器一般指的是程序中由开发人员自定义的一类类加载器,但是Java虚拟机规范却没有这么定义,而是将所有派生于抽象类ClassLoader的类加载器都划分为自定义类加载器
  3. 无论类加载器的类型如何划分,在程序中我们最常见的类加载器始终只有3个,如下所示

image.png
ExtClassLoader
image.png
AppClassLoader
image.png

  1. public static void main(String[] args) {
  2. // 获取系统类加载器
  3. ClassLoader systemClassLoader = ClassLoader.getSystemClassLoader();
  4. System.out.println(systemClassLoader); // sun.misc.Launcher$AppClassLoader@18b4aac2
  5. // 获取其上层:扩展类加载器
  6. ClassLoader extClassLoader = systemClassLoader.getParent();
  7. System.out.println(extClassLoader); // sun.misc.Launcher$ExtClassLoader@1540e19d
  8. // 获取其上层:获取不到引导类加载器
  9. ClassLoader bootstrapClassLoader = extClassLoader.getParent();
  10. System.out.println(bootstrapClassLoader);// null
  11. // 对于用户自定义类来说:默认使用系统类加载器进行加载
  12. ClassLoader classLoader = ClassLoaderTest.class.getClassLoader();
  13. System.out.println(classLoader); // sun.misc.Launcher$AppClassLoader@18b4aac2
  14. // String类使用引导类加载器进行加载的。---> Java的核心类库都是使用引导类加载器进行加载的。
  15. ClassLoader classLoader1 = String.class.getClassLoader();
  16. System.out.println(classLoader1); // null
  17. }

① 我们尝试获取引导类加载器,获取到的值为 null ,这并不代表引导类加载器不存在,因为引导类加载器右 C/C++ 语言,我们获取不到
② 两次获取系统类加载器的值都相同:sun.misc.Launcher$AppClassLoader@18b4aac2 ,这说明系统类加载器是全局唯一的

3.2 虚拟机自带的加载器

3.2.1 启动类加载器(Bootstrap ClassLoader

  1. 这个类加载使用C/C++语言实现的,嵌套在JVM内部
  2. 它用来加载Java的核心库(JAVA_HOME/jre/lib/rt.jar、resources.jar或sun.boot.class.path路径下的内容),用于提供JVM自身需要的类
  3. 并不继承自java.lang.ClassLoader,没有父加载器
  4. 加载扩展类和应用程序类加载器,并作为他们的父类加载器
  5. 出于安全考虑,Bootstrap启动类加载器只加载包名为java、javax、sun等开头的类

    3.2.2 扩展类加载器(Extension ClassLoader)

  6. Java语言编写,由sun.misc.Launcher$ExtClassLoader实现

  7. 派生于ClassLoader类
  8. 父类加载器为启动类加载器
  9. 从java.ext.dirs系统属性所指定的目录中加载类库,或从JDK的安装目录的jre/lib/ext子目录(扩展目录)下加载类库。如果用户创建的JAR放在此目录下,也会自动由扩展类加载器加载

    3.2.3 系统类加载器(也称为系统类加载器,AppClassLoader)

  10. Java语言编写,由sun.misc.LaunchersAppClassLoader实现

  11. 派生于ClassLoader类
  12. 父类加载器为扩展类加载器
  13. 它负责加载环境变量classpath或系统属性java.class.path指定路径下的类库
  14. 该类加载是程序中默认的类加载器,一般来说,Java应用的类都是由它来完成加载
  15. 通过classLoader.getSystemclassLoader()方法可以获取到该类加载器 ```java public static void main(String[] args) {

    System.out.println(“**启动类加载器**“);

    // 获取BootstrapClassLoader能够加载的api的路径 URL[] urLs = sun.misc.Launcher.getBootstrapClassPath().getURLs(); for (URL element : urLs) {

    1. System.out.println(element.toExternalForm());

    } // 从上面的路径中随意选择一个类, 来看看他的类加载器是什么:返回null,是引导类加载器 ClassLoader classLoader = Provider.class.getClassLoader(); System.out.println(classLoader);

    System.out.println(“*扩展类加载器*“); String extDirs = System.getProperty(“java.ext.dirs”); for (String path : extDirs.split(“;”)) {

    1. System.out.println(path);

    }

    // 从上面的路径中随意选择一个类,来看看他的类加载器是什么:扩展类加载器 ClassLoader classLoader1 = CurveDB.class.getClassLoader(); System.out.println(classLoader1);//sun.misc.Launcher$ExtClassLoader@1540e19d

}

  1. ![image.png](https://cdn.nlark.com/yuque/0/2022/png/22523384/1650123250559-15072f55-68da-49cf-80d0-4faadebf8ad8.png#clientId=u20512407-04cd-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=498&id=u3f32d826&margin=%5Bobject%20Object%5D&name=image.png&originHeight=498&originWidth=549&originalType=binary&ratio=1&rotation=0&showTitle=false&size=41197&status=done&style=none&taskId=u92527b36-4478-457d-a293-43a17927af5&title=&width=549)
  2. <a name="USpxp"></a>
  3. ### 3.3 用户自定义类加载器
  4. **3.3.1 什么时候需要自定义类加载器?**<br />在Java的日常应用程序开发中,类的加载几乎是由上述3种类加载器相互配合执行的,在必要时,我们还可以自定义类加载器,来定制类的加载方式。<br />那为什么还需要自定义类加载器?
  5. - 隔离加载类(比如说我假设现在Spring框架,和RocketMQ有包名路径完全一样的类,类名也一样,这个时候类就冲突了。不过一般的主流框架和中间件都会自定义类加载器,实现不同的框架,中间价之间是隔离的)
  6. - 修改类加载的方式
  7. - 扩展加载源(还可以考虑从数据库中加载类,路由器等等不同的地方)
  8. - 防止源码泄漏(对字节码文件进行解密,自己用的时候通过自定义类加载器来对其进行解密)
  9. **3.3.2 如何自定义类加载器?**
  10. 1. 开发人员可以通过**继承抽象类java.lang.ClassLoader类**的方式,实现自己的类加载器,以满足一些特殊的需求
  11. 1. JDK1.2之前,在自定义类加载器时,总会去继承ClassLoader类并重写loadClass()方法,从而实现自定义的类加载类,但是在JDK1.2之后已不再建议用户去覆盖loadClass()方法,而是建议**把自定义的类加载逻辑写在findclass()方法中**
  12. 1. 在编写自定义类加载器时,如果没有太过于复杂的需求,可以直接继承URIClassLoader类,这样就可以避免自己去编写findclass()方法及其获取字节码流的方式,使自定义类加载器编写更加简洁。
  13. ```java
  14. public class CustomClassLoader extends ClassLoader {
  15. @Override
  16. protected Class<?> findClass(String name) throws ClassNotFoundException {
  17. try {
  18. byte[] result = getClassFromCustomPath(name);
  19. if(result == null){
  20. throw new FileNotFoundException();
  21. }else{
  22. return defineClass(name,result,0,result.length);
  23. }
  24. } catch (FileNotFoundException e) {
  25. e.printStackTrace();
  26. }
  27. throw new ClassNotFoundException(name);
  28. }
  29. private byte[] getClassFromCustomPath(String name){
  30. // 从自定义路径中加载指定类:细节略
  31. // 如果指定路径的字节码文件进行了加密,则需要在此方法中进行解密操作。
  32. return null;
  33. }
  34. public static void main(String[] args) {
  35. CustomClassLoader customClassLoader = new CustomClassLoader();
  36. try {
  37. Class<?> clazz = Class.forName("One", true, customClassLoader);
  38. Object obj = clazz.newInstance();
  39. System.out.println(obj.getClass().getClassLoader());
  40. } catch (Exception e) {
  41. e.printStackTrace();
  42. }
  43. }
  44. }

4、ClassLoader的使用说明

ClassLoader类,它是一个抽象类,其后所有的类加载器都继承自ClassLoader(不包括启动类加载器)
image.png
image.png

获取ClassLoader的四种途径

image.png

  1. public static void main(String[] args) {
  2. try {
  3. // 1. 获取当前类的ClassLoader
  4. ClassLoader classLoader = Class.forName("java.lang.String").getClassLoader();
  5. System.out.println(classLoader); // null
  6. // 2.获取当前线程上下文的ClassLoader。 ---》系统类加载器
  7. ClassLoader classLoader1 = Thread.currentThread().getContextClassLoader();
  8. System.out.println(classLoader1); // sun.misc.Launcher$AppClassLoader@18b4aac2
  9. // 3.获取系统的ClassLoader。 --》扩展类加载器
  10. ClassLoader classLoader2 = ClassLoader.getSystemClassLoader().getParent();
  11. System.out.println(classLoader2); // sun.misc.Launcher$ExtClassLoader@1b6d3586
  12. } catch (ClassNotFoundException e) {
  13. e.printStackTrace();
  14. }
  15. }

5、双亲委派机制

5.1 双亲委派机制原理

Java虚拟机对class文件采用的是按需加载的方式,也就是说当需要使用该类时才会将它的class文件加载到内存生成class对象。而且加载某个类的class文件时,Java虚拟机采用的是双亲委派模式,即把请求交由父类处理,它是一种任务委派模式

  1. 如果一个类加载器收到了类加载请求,它并不会自己先去加载,而是把这个请求委托给父类的加载器去执行;
  2. 如果父类加载器还存在其父类加载器,则进一步向上委托,依次递归,请求最终将到达顶层的启动类加载器;
  3. 如果父类加载器可以完成类加载任务,就成功返回,倘若父类加载器无法完成此加载任务,子加载器才会尝试自己去加载,这就是双亲委派模式。
  4. 父类加载器一层一层往下分配任务,如果子类加载器能加载,则加载此类,如果将加载任务分配至系统类加载器也无法加载此类,则抛出异常

image.png

5.2 双亲委派机制代码演示

举例1:我们自己建立一个 java.lang.String 类,写上static代码块

  1. public class String {
  2. // 初始化阶段执行静态代码块
  3. static{
  4. System.out.println("我是自定义的String类的静态代码块");
  5. }
  6. // 执行该mian方法报错: 在类 java.lang.String 中找不到 main 方法。实际是到核心API的String类中找main方法,没有加载自定义的String类
  7. // 由于双亲委派机制一直找父类,所以最后找到了Bootstrap ClassLoader,Bootstrap ClassLoader找到的是 JDK 自带的 String 类,在那个String类中并没有 main() 方法,所以就报了上面的错误。
  8. public static void main(String[] args) {
  9. System.out.println("hello,String");
  10. }
  11. }

image.png
2、在另外的程序中加载 String 类,看看加载的 String 类是 JDK 自带的 String 类,还是我们自己编写的 String 类

  1. public class StringTest {
  2. public static void main(String[] args) {
  3. java.lang.String str = new java.lang.String(); // 仍加载的核心API中的String
  4. // 输出:hello,atguigu.com。
  5. // 程序并没有输出我们静态代码块中的内容,可见仍然加载的是 JDK 自带的 String 类。
  6. System.out.println("hello,atguigu.com");
  7. StringTest test = new StringTest();
  8. System.out.println(test.getClass().getClassLoader()); // sun.misc.Launcher$AppClassLoader@18b4aac2
  9. }
  10. }

举例2:即使类名没有重复,也禁止使用java.lang这种包名。这是一种保护机制

  1. package java.lang;
  2. public class ShkStart {
  3. public static void main(String[] args) {
  4. System.out.println("hello!");
  5. }
  6. }

image.png
举例3:当我们加载jdbc.jar 用于实现数据库连接的时候

  1. 我们现在程序中需要用到SPI接口,而SPI接口属于rt.jar包中Java核心api
  2. 然后使用双清委派机制,引导类加载器把rt.jar包加载进来,而rt.jar包中的SPI存在一些接口,接口我们就需要具体的实现类了
  3. 具体的实现类就涉及到了某些第三方的jar包了,比如我们加载SPI的实现类jdbc.jar包【首先我们需要知道的是 jdbc.jar是基于SPI接口进行实现的】
  4. 第三方的jar包中的类属于系统类加载器来加载
  5. 从这里面就可以看到SPI核心接口由引导类加载器来加载,SPI具体实现类由系统类加载器来加载

image.png

5.3 双亲委派机制优势

通过上面的例子,我们可以知道,双亲委派机制可以

  1. 避免类的重复加载
  2. 保护程序安全,防止核心API被随意篡改

    • 自定义类:自定义java.lang.String 没有被加载。
    • 自定义类:java.lang.ShkStart(报错:阻止创建 java.lang开头的类)

      5.4 沙箱安全机制

  3. 自定义String类时:在加载自定义String类的时候会率先使用引导类加载器加载,而引导类加载器在加载的过程中会先加载jdk自带的文件(rt.jar包中java.lang.String.class),报错信息说没有main方法,就是因为加载的是rt.jar包中的String类。

  4. 这样可以保证对java核心源代码的保护,这就是沙箱安全机制。

    6、其他

    如何判断两个class对象是否相同?

  5. 在JVM中表示两个class对象是否为同一个类存在两个必要条件:

    1. 类的完整类名必须一致,包括包名
    2. 加载这个类的ClassLoader(指ClassLoader实例对象)必须相同
  6. 换句话说,在JVM中,即使这两个类对象(class对象)来源同一个Class文件,被同一个虚拟机所加载,但只要加载它们的ClassLoader实例对象不同,那么这两个类对象也是不相等的

对类加载器的引用

  1. JVM必须知道一个类型是由启动加载器加载的还是由用户类加载器加载的
  2. 如果一个类型是由用户类加载器加载的,那么JVM会将这个类加载器的一个引用作为类型信息的一部分保存在方法区中
  3. 当解析一个类型到另一个类型的引用的时候,JVM需要保证这两个类型的类加载器是相同的(后面讲)