7、JVM入门学习日记(day07)--Java内存区域--运行时数据区之Java堆

155 阅读37分钟

第八章:Java堆

1、堆的核心概述

堆针对一个JVM进程来说是唯一的,也就是一个进程对应一个JVM实例,但是进程包含多个线程,这多个线程是共享同一堆空间的。

image.png

1.1、进程中堆的唯一性

  1. 一个JVM实例只存在一个堆内存,堆也是Java内存管理的核心区域,此内存区域的唯一目的就是存放对象实例
  2. 这也是垃圾收集器最关注的内存区域,因为大多数对象实例的存活时间都很短,比如在方法内部创建的实例在方法执行完之后就没有存在价值了,所以这个区域的垃圾回收性价比最高
  3. Java堆区在JVM启动的时候即被创建,其空间大小也就确定了。是JVM管理的最大一块内存空间。
  4. 堆内存的大小是可以调节的。

为了对这一块有一个更加形象化的说明,这里我们来进行一些程序的演示。比如:有如下程序:编写两个可以导致线程阻塞的类并配置堆内存参数,首先需要注意的点:必须要是线程阻塞的类,从而在jvisualvm.exe程序里面才能够持续加载这个类的具体信息,jvisualvm.exe后面会提到。

编写两个类,类的main方法,代表两个进程,也就反应了两个JVM实例,现在来证明不同的JVM实例存在不同的堆内存,类具体代码如下图:

image.png

然后给这两个类配置堆内存空间,编译后点击Run->Edit Configurations,会跳出来一个弹窗,如下图:第一个程序:设置堆内存大小为10m

image.png

第二个程序:设置堆内存大小为20m

image.png

其中-Xms参数和-Xmx参数都是设置堆内存大小的参数:

  • -Xms:JVM初始时,最小分配的堆内存的大小
  • -Xmx:JVM初始化时,最大分配的堆内存的大小

配置好堆内存参数之后,首先对这两个类重新编译一下,然后启动这两个类,这两个类因为线程阻塞,所以会一直处于运行状态,这样才能够在jvisualvm.exe应用程序中加载这两个类的信息,这两个类启动成功之后,如下图:

image.png

成功启动类中的main方法之后,就可以在jvisualvm.exe应用程序中查看堆内存的分配情况了,那么jvisualvm.exe应用程序的位置在哪呢?jvisualvm.exe程序的位置在jdk安装目录的bin目录下,如下图:

image.png

然后双击打开jvisualvm.exe程序,找到对应的程序,如下图:

image.png

然后点击Visual GC[初始时需要安装,是一个插件],如下图:

image.png

所以综上:每个JVM实例都对应着一个堆内存

1.2、堆空间中关于对象创建和GC的概述

《Java虚拟机规范》规定,堆可以处于物理上不连续的内存空间中,但在逻辑上它应该被视为连续的[类似链表结构]。

所有的线程共享Java堆,但是java堆空间里面的东西都是全部共享的吗?当然不是,从分配内存的角度来看,我们在这里还可以将堆划分出线程私有的缓冲区(Thread Local Allocation Buffer,TLAB),提升对象分配时的效率。

《Java虚拟机规范》中对Java堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。(The heap is the run-time data area from which memory for all class instances and arrays is allocated),但是我要说的是:“几乎” 所有的对象实例都在这里分配内存---从实际使用角度看的。因为还有一些对象是在栈上分配的[参考逃逸分析技术一节]

image.png

数组和对象可能永远不会存储在栈上,因为栈帧中保存着对象的引用,这个引用指向对象或者数组在堆中的位置。在方法结束后,堆中的对象不会马上被移除,仅仅在垃圾收集的时候才会被移除。[方法执行完毕,栈中的s1、s2出栈,指向堆空间中对象的指针引用没了,于是就认为是垃圾【出现导致GC机制发生的情况才会进行回收,比如堆空间大小满了,不是方法执行完就立马回收】,以前java基础讲过]

  • 也就是触发了GC的时候,才会进行回收。GC是需要消耗系统资源的,频繁GC会影响用户线程和程序吞吐量,不建议频繁GC
  • 如果堆中对象马上被回收,那么用户线程就会收到影响,因为有stop the word,堆是GC(Garbage Collection,垃圾收集器)执行垃圾回收的重点区域

image.png

1.3、堆内存细分和查看

现代垃圾收集器大部分都基于分代收集理论设计,堆空间细分为:

Java 7及之前堆内存逻辑上分为三部分[事实上没有包括永久代和元空间]:新生区+养老区+永久区

image.png

Java 8及之后堆内存逻辑上分为三部分:新生区+养老区+元空间

image.png

约定: 下面的这些都可以这样叫:

新生区<==>新生代<==>年轻代、
养老区<==>老年区<==>老年代、
永久区<==>永久代

其实我们设置的堆内存的参数只包含新生代和养老区这两部分,永久代根本不起作用: 可以使用jvisualvm.exe进行验证,新生代加养老区加起来内存和就等于设置的堆内存的参数。

image.png

堆空间内部结构,JDK1.8之前从永久代替换成元空间

image.png

比如,我们可以通过在jvm中安装 -XX:+PrintGCDetails 日志分析相应命令来查看jdk不同版本的堆信息,这里使用jdk1.8为例

image.png

设置之后运行该程序

image.png

2、设置堆内存大小

Java 堆既可以被实现成固定大小的,也可以是可扩展的,不过当前主流的Java虚拟机都是按照可扩展来实现的(通过参数-Xmx和-Xms设定)。如果在 Java 堆中没有内存完成实例分配,并且堆也无法再扩展时,Java 虚拟机将会抛出 OutOfMemoryError 异常。

Java堆区用于存储Java对象实例,那么堆的大小在JVM启动时就已经设定好了,可以通过选项"-Xmx""-Xms"来进行设置。

  • “-Xms"用于表示堆区【一般是设置年轻代加老年代,不包括元空间(永久代)】的起始内存,等价于-xx:InitialHeapSize
  • “-Xmx"则用于表示堆区的最大内存,等价于-XX:MaxHeapSize

一旦堆区中的内存大小超过“-Xmx"所指定的最大内存时,将会抛出outofMemoryError异常。通常会将-Xms和-Xmx两个参数配置相同的值,其目的是避免初始值不够的时候频繁的去扩展,为了能够在java垃圾回收机制清理完堆区后不需要重新分隔计算堆区的大小,从而提高性能

默认情况下:

  • 初始内存大小:物理电脑内存大小/64
  • 最大内存大小:物理电脑内存大小/4
  • 可以通过这两个参数手动设置【范围在最小和最大之间】

比如下面程序:可以查看堆空间的默认情况下的大小

image.png

输出结果

-Xms:107M
-Xmx:1579M

那这个值怎么算出来的呢?我们以手动设置堆内存的方式为大家演示一下:

1、将初始堆内存和最大的堆内存设置成xms600m -Xmx600m

image.png

2、运行上面程序发现初始内存和最大内存是575不是600

3、将程序阻塞一段时间,再次启动程序

image.png

4、cmd窗口运行jps指令查看当前运行的程序的进程id,然后使用jstat -gc 进程id 命令查看该进程的堆内存的内存分配情况?

image.png

5、为什么是600,不是575呢,因为新生代有Eden区和Survivor0区,Survivor1区,但是存放数据的时候Eden区全部存放,Survivor0区,Survivor1区其中一个用来存放数据,所以计算的时候只需要计算一个Survivor区

image.png

6、我们还有一种更加简单的方式:设置堆内存参数的时候加上-XX:+PrintGCDetails即可查看堆相关参数的大小【关闭阻塞代码】

image.png

3、OutOfMemory内存溢出

OOM虽然从定义上来说是属于Error错误,不是Exception,但是可以说是广义的异常,观看下面程序,就是一个典型的OOM例子。

image.png

我们简单的写一个OOM例子,并设置启动参数-Xms600m -Xmx:600m

image.png

运行后,就出现OOM了,那么我们可以通过 jVisualVM这个工具查看具体是什么参数造成的OOM

image.png

OOM发生后堆空间发生的现象

也可以通过下面可视化工具看出:就是因为不断的造picturu对象,从而不断的造字节数组,然后该数组越来越多

image.png

4、年轻代与老年代

4.1、新生代与老年代在堆结构的占比设置

存储在JVM中的Java对象可以被划分为两类:

  • 一类是生命周期较短的瞬时对象,这类对象的创建和消亡都非常迅速

    • 生命周期短的,及时回收即可
  • 另外一类对象的生命周期却非常长,在某些极端的情况下还能够与JVM的生命周期保持一致

Java堆区进一步细分的话,可以划分为年轻代(YoungGen)和老年代(oldGen),其中年轻代又可以划分为Eden空间、Survivor0空间和Survivor1空间(有时也叫做from区、to区)

image.png

下面这参数开发中一般不会调:

image.png

  • Eden:From:to -> 8:1:1
  • 新生代:老年代 - > 1 : 2

参数配置新生代与老年代在堆结构的占比:

  • 默认-XX:NewRatio=2,表示新生代占1,老年代占2,新生代占整个堆的1/3

  • 可以修改-XX:NewRatio=4,表示新生代占1,老年代占4,新生代占整个堆的1/5

image.png

默认情况下,新生代占1,老年代占2,新生代占整个堆的1/3,如下

image.png

补充:查看占比我们也可以通过命令jinfo -flag newRatio 进程id查看

4.2、Eden空间和另外两个Survivor空间缺省所占设置

当发现在整个项目中,生命周期长的对象偏多,那么就可以通过调整老年代的大小,来进行调优

在HotSpot中, Eden空间和另外两个Survivor空间缺省所占的比例是8:1:1, 当然开发人员可以通过选项“-XX: SurvivorRatio"调整这个空间比例。比如-XX : SurvivorRatio=8

我们查看一下Eden空间和另外两个Survivor空间缺省所占的比例是比不是8:1:1,而是6:1:1,为什么会这样呢?

image.png

因为JVM存在自适应的一个机制,默认的情况下是有一个自适应的比例的,如果想要关闭自适应的比例,如下图,我们设置一个-XX: -UseAdaptivesizePolicy:关闭自适应的内存分配策略,但是结果还是6:1:1,

image.png

要想使8:1:1怎末办?可以通过选项“-XX: SurvivorRatio=8"显示的调整这个空间比例

image.png

几乎所有的Java对象都是在Eden区被new出来的,绝大部分的Java对象的销毁都在新生代进行了。IBM公司的专门研究表明,新生代中80% 的对象都是“朝生夕死”的,可以使用选项”-Xmn”这个参数设置新生代最大内存大小,这个参数一般使用默认值就可以了。

image.png

5、图解对象分配过程

5.1、概念

为新对象分配内存是一件非常严谨和复杂的任务,JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行完内存回收后是否会在内存空间中产生内存碎片。

  • new的对象先放Eden区。此区有大小限制。
  • 当Eden的空间填满时,程序又需要创建对象,JVM的垃圾回收器将对Eden区进行一次垃圾回收(MinorGC),将Eden区中的不再被其他对象所引用的对象进行销毁。再加载新的对象放到Eden区
  • 然后将Eden中的剩余对象移动到幸存者0区。
  • 如果再次触发垃圾回收,此时上次幸存下来的放到幸存者0区的,如果没有回收,就会放到幸存者1区。
  • 如果再次经历垃圾回收,此时会重新放回幸存者0区,接着再去幸存者1区。
  • 啥时候能去养老区呢?可以设置次数。默认是15次。

​ 可以设置参数:-Xx:MaxTenuringThreshold= N 进行设置

  • 在养老区,相对悠闲。当养老区内存不足时,再次触发GC:Major GC,进行养老区的内存清理
  • 若养老区执行了Major GC之后,发现依然无法进行对象的保存,就会产生OOM异常。

5.2、图解过程

我们创建的对象,一般都是存放在Eden区的,当我们Eden区满了后,就会触发GC操作,一般被称为 YGC / Minor GC操作

image.png

当我们进行一次GC垃圾收集[通过STW操作判断哪个对象成为垃圾、复制收集算法]后,红色的垃圾将会被回收(这就是长期存活的对象),而绿色的还会被占用着,存放在S0(Survivor From)区。同时我们给每个对象设置了一个年龄计数器,一次回收后就是1。

同时Eden区继续存放对象,当Eden区再次存满的时候,又会触发一个MinorGC操作,此时GC将会把 Eden和Survivor From中的对象 进行一次收集,把存活的对象放到 Survivor To区,同时让年龄 + 1

image.png

因此下一次的GC就是永远往TO区【谁空就是TO区】里面放,我们继续不断的进行对象生成 和 垃圾回收,当Survivor中的某些对象的年龄达到15的时候,将会触发一次 Promotion晋升的操作,也就是将年轻代中的对象 晋升到 老年代中

image.png

思考:幸存区区满了后?

  • 特别注意,在Eden区满了的时候,才会触发MinorGC,而幸存者区满了后,不会触发MinorGC操作
  • 如果Survivor区满了后,将会触发一些特殊的规则,也就是可能直接晋升老年代

举例:以当兵为例,正常人的晋升可能是 : 新兵 -> 班长 -> 排长 -> 连长。但是也有可能有些人因为做了非常大的贡献,直接从 新兵 -> 排长

5.3、对象分配的特殊情况

  • 大对象最终放入老年代
  • 但是如果老年代放不下就会先执行fll gc,FUll GC完后如果老年代还是放不下就会报OOM异常,参看5.3
  • 如果survivor区中相同年龄的所有对象大小的总和大于Survivor空间的一半,年龄大于或等于该年龄的对象可以直接进入老年代

image.png

5.4、代码演示对象分配过程

我们不断的创建大对象

public class HeapInstanceTest {
    byte [] buffer = new byte[new Random().nextInt(1024 * 200)];
    public static void main(String[] args) throws InterruptedException {
        ArrayList<HeapInstanceTest> list = new ArrayList<>();
        while (true) {
            list.add(new HeapInstanceTest());
            Thread.sleep(10);
        }
    }
}

然后设置JVM参数

-Xms600m -Xmx600m

然后cmd输入下面命令,打开VisualVM图形化界面

jvisualvm

然后通过执行上面代码,通过VisualGC进行动态化查看

最终,在老年代和新生代都满了,就出现OOM

Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
               at com.atguigu.java.chapter08.HeapInstanceTest.<init>(HeapInstanceTest.java:13)
               at com.atguigu.java.chapter08.HeapInstanceTest.main(HeapInstanceTest.java:17)

6、常用的调优工具概述

  • JDK命令行

  • Eclipse:Memory Analyzer Tool

  • Jconsole

  • Visual VM(实时监控 推荐~)

  • Jprofiler(推荐~) idea装上Jprofiler插件

image.png

  • Java Flight Recorder(实时监控)

  • GCViewer

  • GCEasy

7、总结

  • 针对幸存者s0,s1区的总结:复制之后有交换,谁空谁是to
  • 关于垃圾回收:频繁在新生区收集,很少在老年代收集,几乎不再永久代和元空间进行收集
  • 新生代采用复制算法的目的:是为了减少内碎片

8、Minor GC,MajorGC、Full GC

8.1、概念

  • Minor GC:新生代的GC
  • Major GC:老年代的GC
  • Full GC:整堆收集,收集整个Java堆和方法区的垃圾收集

我们都知道,JVM的调优的一个环节,也就是垃圾收集,我们需要尽量的避免垃圾回收,因为在垃圾回收的过程中,容易出现**STW(STW:stop the word)**的问题,而 Major GC 和 Full GC出现STW的时间,是Minor GC的10倍以上

JVM在进行GC时,并非每次都对上面三个内存区域【新生代,老年代,7永久代8方法区】一起回收的,大部分时候回收的都是指新生代。针对Hotspot VM的实现,它里面的GC按照回收区域又分为两大种类型:一种是部分收集(Partial GC),一种是整堆收集(FullGC)

部分收集: 不是完整收集整个Java堆的垃圾收集。其中又分为:

  • 新生代收集(Minor GC/Young GC):只是新生代[eden,s0,s1]的垃圾收集
  • 老年代收集(Major GC/old GC):只是老年代的圾收集。
    • 目前,只有CMS GC会有单独收集老年代的行为。
    • 注意,很多时候Major GC会和Fu11 GC混淆使用,需要具体分辨是老年代回收还是整堆回收。
  • 混合收集(MixedGC):收集整个新生代以及部分老年代的垃圾收集。
    • 目前,只有G1 GC会有这种行为

整堆收集(FullGC): 收集整个java堆和方法区的垃圾收集。

8.2、Minor GC

年轻代空间不足时,就会触发MinorGC,这里的年轻代满指的是Eden代满,Survivor满不会引发GC。(每次Minor GC会清理年轻代的内存。)

因为Java对象大多都具备 朝生夕灭 的特性,所以Minor GC非常频繁,一般回收速度也比较快。这一定义既清晰又易于理解。

Minor GC会引发STW,暂停其它用户的线程,等垃圾回收结束,用户线程才恢复运行

image.png

threshold:阈值,年龄计数器

8.3、Major GC

指发生在老年代的GC,对象从老年代消失时,我们说 “Major Gc” 或 “Full GC” 发生了

出现了MajorGc,经常会伴随至少一次的Minor GC(但非绝对的,在Paralle1 Scavenge收集器的收集策略里就有直接进行MajorGC的策略选择过程)

  • 也就是在老年代空间不足时,会先尝试触发MinorGc。如果之后空间还不足,则触发Major GC

Major GC的速度一般会比MinorGc慢1e倍以上,STW的时间更长,如果Major GC后,内存还不足,就报OOM

8.4、Full GC

触发Fu11GC执行的情况有如下五种:

  • 调用System.gc()时,系统建议执行Fu11GC,但是不必然执行
  • 老年代空间不足
  • 方法区空间不足
  • 通过Minor GC后进入老年代的平均大小大于老年代的可用内存
  • 由Eden区、survivor space(From Space)区向survivor spacel(To Space)区复制时,对象大小大于To Space可用内存,则把该对象转存到老年代,且老年代的可用内存小于该对象大小,FUll GC完后如果老年代还是放不下就会报OOM异常,参看5.3

说明:Full GC 是开发或调优中尽量要避免的。这样暂时时间会短一些

9、GC 举例及日志分析

虚拟机提供了-XX:PrintGCDetails参数,发生垃圾回收时打印内存回收日志,并且在进程退出时输出当前内存各区域的分配情况

我们编写一个OOM的异常,因为我们在不断的创建字符串,是存放在元空间的

public class GCTest {
    public static void main(String[] args) {
        int i = 0;
        try {
            List<String> list = new ArrayList<>();
            String a = "mogu blog";
            while(true) {
                list.add(a);
                a = a + a;
                i++;
            }
        }catch (Exception e) {
            e.getStackTrace();
        }
    }
}

设置JVM启动参数

-Xms10m -Xmx10m -XX:+PrintGCDetails

打印出的日志

image.png

触发OOM的时候,一定是进行了一次Full GC,因为只有在老年代空间不足时候,才会爆出OOM异常

  • 分析第四行Full GC
    • [PSYoungGen: 256K->0K(2560K)]:年轻代总空间为 2560K ,当前占用 256K ,经过垃圾回收后剩余 0K
    • [ParOldGen: 6852K->4494K(7168K)]:老年代总空间为 7168K ,当前占用 6852K ,经过垃圾回收后剩余 4494K
    • 7108K->4494K(9728K):堆内存总空间为 9728K ,当前占用 7108K ,经过垃圾回收后剩余 4494K
    • [Metaspace: 3287K->3287K(1056768K)]:元空间总空间为 1056768K ,当前占用 3452K ,经过垃圾回收后剩余 3452K
    • 0.0057478 secs :垃圾回收用时 0.0057478 secs

10、堆空间分代思想

为什么要把Java堆分代?不分代就不能正常工作了吗?经研究,不同对象的生命周期不同。70%-99%的对象是临时对象。

  • 新生代:有Eden、两块大小相同的survivor(又称为from/to,s0/s1)构成,to总为空。
  • 老年代:存放新生代中经历多次GC仍然存活的对象。

image.png

其实不分代完全可以,分代的唯一理由就是优化GC性能,即更好的回收内存或更快的分配内存。如果没有分代,那所有的对象都在一块,就如同把一个学校的人都关在一个教室。GC的时候要找到哪些对象没用,这样就会对堆的所有区域进行扫描。而很多对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储“朝生夕死”对象的区域进行回收,这样就会腾出很大的空间出来。

image.png

11、内存分配策略(对象提升规则)

重点

  1. 对象优先在Eden分配,长期存活的对象将在年龄计数器下满足MaxTenuringThreshold阈值(默认15)就会进入老年代
  2. 年龄计数器: 基于分代收集来管理内存,就必须决策哪些对象应当放在新生代,哪些在老年代,因此虚拟机给每个对象定义一个对象年龄(Age)计数器。如果对象在Eden区出生,并经过第一次Minor GC后仍然存货,并且能够被Survivor容纳,将被移动到Survivor空间中,并且对象年龄设为1。对象在Survivor区中每“熬过”一次Minor GC,年龄就增加1岁,当它的年龄增加到一定程度(默认15岁),就会被晋升到老年代中。
  3. 大对象直接进入老年代
  4. 动态对象年龄判定: 为了能更好地适应不同程序的内存状况,HotSpot虚拟机并不是永远要求对象的年龄必须达到-XX:MaxTenuringThreshold才能晋升老年代,如果在Survivor空间中相同年龄所有对象大小的总和大于Survivor空间的一半,年龄大于或等于该年龄的对象就可以直接进入老年代,无须等到-XX:MaxTenuringThreshold中要求的年龄。

概述

如果对象在Eden出生并经过第一次Minor GC后仍然存活,并且能被Survivor容纳的话,将被移动到survivor空间中,并将对象年龄设为1。对象在survivor区中每熬过一次MinorGC,年龄就增加1岁,当它的年龄增加到一定程度(默认为15岁,其实每个JVM、每个GC都有所不同)时,就会被晋升到老年代

对象晋升老年代的年龄阀值,可以通过选项-xx:MaxTenuringThreshold来设置

针对不同年龄段的对象分配原则如下所示:

  • 优先分配到Eden
  • 开发中比较长的字符串或者数组,会直接存在老年代,但是因为新创建的对象都是朝生夕死的,所以这个大对象可能也很快被回收,但是因为老年代触发Major GC的次数比 Minor GC要更少,因此可能回收起来就会比较慢
  • 大对象直接分配到老年代
  • 尽量避免程序中出现过多的大对象
package com.zjt.test.jvm008;
 
public class Main {
	public static void main(String[] args) {
		byte [] b4 = new byte[40 * 1024 * 1024];
	}
}

打开GC控制台输出运行程序,可以看到如下运行结果。

  • 长期存活的对象分配到老年代
  • 动态对象年龄判断
    • 如果survivor区中相同年龄的所有对象大小的总和大于Survivor空间的一半,年龄大于或等于该年龄的对象可以直接进入老年代,无须等到MaxTenuringThreshold中要求的年龄。
  • 空间分配担保: -Xx:HandlePromotionFailure,也就是经过Minor GC后,所有的对象都存活,因为Survivor比较小,所以就需要将Survivor无法容纳的对象,存放到老年代中。

代码示例

 1 /**
 2  * 测试:大对象直接进入老年代
 3  * -Xms60m -Xmx60m -XX:NewRatio=2 -XX:SurvivorRatio=8 -XX:+PrintGCDetails
 4  *
 5  *  参数设置后:
 6  *      新生代--20m
 7  *          Eden--16m  S0--2m S1--2m
 8  *      老年代--40m
 9  */
10 public class YoungOldAreaTest {
11     public static void main(String[] args) {
12         byte[] buffer = new byte[1024 * 1024 * 20];//20m
13 
14     }
15 }
  • JVM 参数

-Xms60m -Xmx60m -XX:NewRatio=2 -XX:SurvivorRatio=8 -XX:+PrintGCDetails

  • 整个过程并没有进行垃圾回收,并且 ParOldGen 区直接占用了 20MB 的空间,说明大对象直接怼到了老年代中  img

补充:大对象直接进入老年代

所谓的大对象是指,需要大量连续内存空间的Java对象,最典型的大对象就是那种很长的字符串以及数组。大对象对虚拟机的内存分配来说,就是一个坏消息(更坏的消息,就是一群“朝生夕灭”的“短命大对象”,写程序时应该尽量避免)。经常出现大对象容易导致内存还有不少空间时,就提前触发垃圾收集以获取足够的连续空间来“安置”他们。

12、为对象分配内存:TLAB

问题:堆空间都是共享的么?

不一定,因为还有TLAB这个概念,在堆中划分出一块区域,为每个线程所独占

为什么有TLAB?

  • TLAB:Thread Local Allocation Buffer,也就是为每个线程单独分配了一个缓冲区
  • 堆区是线程共享区域,任何线程都可以访问到堆区中的共享数据,由于对象实例的创建在JVM中非常频繁,因此在并发环境下从堆区中划分内存空间是线程不安全的
  • 为避免多个线程操作同一地址,需要使用加锁等机制,进而影响分配速度。

什么是TLAB

从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分,JVM为每个线程分配了一个私有缓存区域,它包含在Eden空间内。

多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题,同时还能够提升内存分配的吞吐量,因此我们可以将这种内存分配方式称之为快速分配策略

据我所知所有OpenJDK衍生出来的JVM都提供了TLAB的设计。

image.png

尽管不是所有的对象实例都能够在TLAB中成功分配内存,但JVM确实是将TLAB作为内存分配的首选[相对于Eden区]。

在程序中,开发人员可以通过选项“-Xx:UseTLAB”设置是否开启TLAB空间。

默认情况下,TLAB空间的内存非常小,仅占有整个Eden空间的1,当然我们可以通过选项-Xx:TLABWasteTargetPercent设置TLAB空间所占用Eden空间的百分比大小。一旦对象在TLAB空间分配内存失败时,JVM就会尝试着通过使用加锁机制确保数据操作的原子性,从而直接在Eden空间中分配内存。

TLAB分配过程

对象首先是通过TLAB开辟空间,如果不能放入,那么需要通过Eden来进行分配

image.png

代码实例

/**
 * 测试-XX:UseTLAB参数是否开启的情况:默认情况是开启的
 *
 */
public class TLABArgsTest {
    public static void main(String[] args) {
        System.out.println("我只是来打个酱油~");
        try {
            Thread.sleep(1000000);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
    }
}
  • 查看 UseTLAB 标志位的状态

    命令:jps

    命令:jinfo -flag UseTLAB 进程id

  • 没有设置任何 JVM 参数,通过命令行查看 TLAB 是否开启:结论是默认情况是开启 TLAB

img

13、小结:堆空间的参数设置

官方文档:docs.oracle.com/javase/8/do…

  • -XX:+PrintFlagsInitial:查看所有的参数的默认初始值
  • -XX:+PrintFlagsFinal:查看所有的参数的最终值(可能会存在修改,不再是初始值)
  • -Xms:初始堆空间内存(默认为物理内存的1/64)
  • -Xmx:最大堆空间内存(默认为物理内存的1/4)
  • -Xmn:设置新生代的大小。(初始值及最大值)
  • -XX:NewRatio:配置新生代与老年代在堆结构的占比
  • -XX:SurvivorRatio:设置新生代中Eden和S0/S1空间的比例
  • -XX:MaxTenuringThreshold:设置新生代垃圾的最大年龄
  • -XX:+PrintGCDetails:输出详细的GC处理日志
    • 打印gc简要信息:
      • -Xx:+PrintGC
      • -verbose:gc
  • -XX:HandlePromotionFalilure:是否设置空间分配担保

14、空间分配担保

在发生Minor GC之前,虚拟机会检查老年代最大可用的连续空间是否大于新生代所有对象的总空间。

  • 如果大于,则此次Minor GC是安全的

  • 如果小于,则虚拟机会查看-xx:HandlePromotionFailure设置值是否允担保失败。

    • 如果HandlePromotionFailure=true,那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小。
    • 如果大于,则尝试进行一次Minor GC,但这次Minor GC依然是有风险的;
    • 如果小于或HandlePromotionFailure=false(flase代表不允许冒险),则改为进行一次Ful1 Gc。

在JDK6 Update24之后,HandlePromotionFailure参数不会再影响到虚拟机的空间分配担保策略,观察openJDK中的源码变化,虽然源码中还定义了HandlePromotionFailure参数,但是在代码中已经不会再使用它。JDK6 Update 24之后的规则变为只要老年代的连续空间大于新生代对象总大小或者历次晋升的平均大小就会进行Minor GC,否则将进行FullGC。

15、逃逸分析

15.1、概念

堆是分配对象的唯一选择么?

在《深入理解Java虚拟机》中关于Java堆内存有这样一段描述:

  1. 随着JIT编译期的发展与逃逸分析技术逐渐成熟,栈上分配、标量替换优化技术将会导致一些微妙的变化,所有的对象都分配到堆上也渐渐变得不那么“绝对”了。
  2. 在Java虚拟机中,对象是在Java堆中分配内存的,这是一个普遍的常识。但是,有一种特殊情况,那就是如果经过逃逸分析(Escape Analysis)后发现,一个对象并没有逃逸出方法的话,那么就可能被优化成栈上分配。这样就无需在堆上分配内存,也无须进行垃圾回收了。这也是最常见的堆外存储技术。
  3. 此外,前面提到的基于openJDk深度定制的TaoBaovm,其中创新的GCIH(GC invisible heap)技术实现off-heap,将生命周期较长的Java对象从heap中移至heap外,并且GC不能管理GCIH内部的Java对象,以此达到降低GC的回收频率和提升GC的回收效率的目的。

如何将堆上的对象分配到栈,需要使用逃逸分析手段。

逃逸分析(Escape Analysis)是目前Java虚拟机中比较前沿的优化技术, 它与类型继承关系分析一样, 并不是直接优化代码的手段,而是为其他优化措施提供依据的分析技术,这是一种可以有效减少Java程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。通过逃逸分析,Java Hotspot编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。逃逸分析的基本行为就是分析对象动态作用域

  • 当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸。
  • 当一个对象在方法中被定义后,它被外部方法所引用,则认为发生逃逸。例如作为调用参数传递到其他地方中。
    • 方法逃逸:作为调用参数传递到其他方法中
    • 线程逃逸:可能被外部线程访问到,譬如赋值给可以在其他线程中访问的实例变量
    • 对象由低到高的不同逃逸程度:从不逃逸、 方法逃逸到线程逃逸

15.2、逃逸分析举例

没有发生逃逸的对象,则可以分配到栈上,随着方法执行的结束,栈空间就被移除,每个栈里面包含了很多栈帧,也就是发生逃逸分析,即如果确定一个对象不会逃逸出线程之外, 那让这个对象在栈上分配内存,对象所占用的内存空间就可以随栈帧出栈而销毁

public void my_method() {
    V v = new V();
    // use v
    // ....
    v = null;
}

针对下面的代码,下面就发生了逃逸

public static StringBuffer createStringBuffer(String s1, String s2) {
    StringBuffer sb = new StringBuffer();
    sb.append(s1);
    sb.append(s2);
    return sb;
}

如果想要StringBuffer sb不发生逃逸,可以这样写

public static String createStringBuffer(String s1, String s2) {
    StringBuffer sb = new StringBuffer();
    sb.append(s1);
    sb.append(s2);
    return sb.toString();
}

完整的逃逸分析代码举例

/**
 * 逃逸分析
 * 如何快速的判断是否发生了逃逸分析,大家就看new的对象是否在方法外被调用。
 * @author: 陌溪
 * @create: 2020-07-07-20:05
 */
public class EscapeAnalysis {
 
    public EscapeAnalysis obj;
 
    /**
     * 方法返回EscapeAnalysis对象,发生逃逸
     * @return
     */
    public EscapeAnalysis getInstance() {
        return obj == null ? new EscapeAnalysis():obj;
    }
 
    /**
     * 为成员属性赋值,发生逃逸
     */
    public void setObj() {
        this.obj = new EscapeAnalysis();
    }
 
    /**
     * 对象的作用于仅在当前方法中有效,没有发生逃逸
     */
    public void useEscapeAnalysis() {
        EscapeAnalysis e = new EscapeAnalysis();
    }
 
    /**
     * 引用成员变量的值,发生逃逸
     */
    public void useEscapeAnalysis2() {
        EscapeAnalysis e = getInstance();
        // getInstance().XXX  发生逃逸
    }
}

15.3、逃逸分析参数设置

在JDK 1.7 版本之后,HotSpot中默认就已经开启了逃逸分析

如果使用的是较早的版本,开发人员则可以通过:

  • 选项“-xx:+DoEscapeAnalysis"显式开启逃逸分析
  • 通过选项“-xx:+PrintEscapeAnalysis"查看逃逸分析的筛选结果

15.4、结论

开发中能使用局部变量的,就不要使用在方法外定义。

使用逃逸分析,编译器可以对代码做如下优化:

  • 栈上分配:将堆分配转化为栈分配。如果一个对象在子程序中被分配,要使指向该对象的指针永远不会发生逃逸,栈上分配是对象的首选,而不是堆上分配
  • 同步省略:如果一个对象被发现只有一个线程被访问到,那么对于这个对象的操作可以不考虑同步。
  • 分离对象或标量替换:有的对象可能不需要作为一个连续的内存结构存在也可以被访问到,那么对象的部分(或全部)可以不存储在内存,而是存储在CPU寄存器中。

16、代码优化之栈上分配

JIT编译器在编译期间根据逃逸分析的结果,发现如果一个对象并没有逃逸出方法的话,就可能被优化成栈上分配。分配完成后,继续在调用栈内执行,最后线程结束,栈空间被回收,局部变量对象也被回收。这样就无须进行垃圾回收(GC无论是标记筛选出可回收对象,还是回收和整理内存,都需要耗费大量资源)。如果能使用栈上分配,那大量的对象就会随着方法的结束而自动销毁了,垃圾收集子系统的压力将会下降很多

常见的栈上分配的场景:在逃逸分析中,已经说明了。分别是给成员变量赋值、方法返回值、实例引用传递。

栈上分配举例

我们通过举例来说明 开启逃逸分析 和 未开启逃逸分析时候的情况

/**
 * 栈上分配
 * -Xmx1G -Xms1G -XX:-DoEscapeAnalysis -XX:+PrintGCDetails
 * @author: 陌溪
 * @create: 2020-07-07-20:23
 */
class User {
    private String name;
    private String age;
    private String gender;
    private String phone;
}
public class StackAllocation {
    public static void main(String[] args) throws InterruptedException {
        long start = System.currentTimeMillis();
        for (int i = 0; i < 100000000; i++) {
            alloc();
        }
        long end = System.currentTimeMillis();
        System.out.println("花费的时间为:" + (end - start) + " ms");
 
        // 为了方便查看堆内存中对象个数,线程sleep
        Thread.sleep(10000000);
    }
 
    private static void alloc() {
        User user = new User();
    }
}

设置JVM参数,表示未开启逃逸分析

-Xmx1G -Xms1G -XX:-DoEscapeAnalysis -XX:+PrintGCDetails

运行结果,同时还触发了GC操作

花费的时间为:664 ms

然后查看内存的情况,发现有大量的User存储在堆中

image.png

我们在开启逃逸分析

-Xmx1G -Xms1G -XX:+DoEscapeAnalysis -XX:+PrintGCDetails

然后查看运行时间,我们能够发现花费的时间快速减少,同时不会发生GC操作, 栈上分配是真的快啊

花费的时间为:5 ms

然后在看内存情况,我们发现只有很少的User对象,说明User发生了逃逸,因为他们存储在栈中,随着栈的销毁而消失

image.png

总结

通过情况1:未开启逃逸,有GC日志打印,且对中User对象很多

情况2:开启逃逸,无GC日志,且堆中对象少;说明部分对象不在堆中创建的,那么间接说明了栈上分配

Java对象分配流程总结

image.png

image.png

17、代码优化之同步省略

线程同步的代价是相当高的,同步的后果是降低并发性和性能。

在动态编译同步块的时候,JIT编译器可以借助逃逸分析来判断同步块所使用的锁对象是否只能够被一个线程访问而没有被发布到其他线程。

如果没有,那么JIT编译器在编译这个同步块的时候就会取消对这部分代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫同步省略,也叫锁消除。

例如下面的代码

public void f() {
    Object hellis = new Object();
    synchronized(hellis) {
        System.out.println(hellis);
    }
}

代码中对hellis这个对象加锁,但是hellis对象的生命周期只在f()方法中,并不会被其他线程所访问到,所以在JIT编译阶段就会被优化掉,优化成:

public void f() {
    Object hellis = new Object();
               System.out.println(hellis);
}

我们将其转换成字节码

image.png

  • 注意:字节码文件中并没有进行优化,可以看到加锁和释放锁的操作依然存在,同步省略操作是在解释运行时发生的

18、分离对象和标量替换

标量(scalar)是指一个无法再分解成更小的数据的数据。Java中的原始数据类型就是标量。

相对的,那些还可以分解的数据叫做聚合量(Aggregate),Java中的对象就是聚合量,因为他可以分解成其他聚合量和标量。

在JIT阶段,如果经过逃逸分析,发现一个对象不会被外界访问的话,那么经过JIT优化,就会把这个对象拆解成若干个其中包含的若干个成员变量来代替。这个过程就是标量替换。

public static void main(String args[]) {
    alloc();
}
class Point {
    private int x;
    private int y;
}
private static void alloc() {
    Point point = new Point(1,2);
    System.out.println("point.x" + point.x + ";point.y" + point.y);
}

以上代码,经过标量替换后,就会变成

private static void alloc() {
    int x = 1;
    int y = 2;
    System.out.println("point.x = " + x + "; point.y=" + y);
}

可以看到,Point这个聚合量经过逃逸分析后,发现他并没有逃逸,就被替换成两个聚合量了。那么标量替换有什么好处呢?就是可以大大减少堆内存的占用。因为一旦不需要创建对象了,那么就不再需要分配堆内存了。 标量替换为栈上分配提供了很好的基础。

标量替换参数设置

参数 -XX:+ElimilnateAllocations:开启了标量替换(默认打开),允许将对象打散分配在栈上。

代码示例

  • 代码

     1 /**
     2  * 标量替换测试
     3  * -Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:-EliminateAllocations
     4  *
     5  */
     6 public class ScalarReplace {
     7     public static class User {
     8         public int id;
     9         public String name;
    10     }
    11 
    12     public static void alloc() {
    13         User u = new User();//未发生逃逸
    14         u.id = 5;
    15         u.name = "www.test.com";
    16     }
    17 
    18     public static void main(String[] args) {
    19         long start = System.currentTimeMillis();
    20         for (int i = 0; i < 10000000; i++) {
    21             alloc();
    22         }
    23         long end = System.currentTimeMillis();
    24         System.out.println("花费的时间为: " + (end - start) + " ms");
    25     }
    26 }
    
  • 未开启标量替换

    • JVM 参数:-Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:-EliminateAllocations
    • 日志分析:伴随着 GC 的垃圾回收,用时 112ms
  • 开启标量替换

    • JVM 参数:-Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:+EliminateAllocations
    • 日志分析:无垃圾回收,用时 9ms

标量替换参数总结

上述代码在主函数中进行了1亿次alloc。调用进行对象创建,由于User对象实例需要占据约16字节的空间,因此累计分配空间达到将近1.5GB。如果堆空间小于这个值,就必然会发生GC。使用如下参数运行上述代码:

-server -Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:+EliminateAllocations

这里设置参数如下:

  • 参数-server:启动Server模式,因为在server模式下,才可以启用逃逸分析。
  • 参数-XX:+DoEscapeAnalysis:启用逃逸分析
  • 参数-Xmx10m:指定了堆空间最大为10MB
  • 参数-XX:+PrintGC:将打印Gc日志。
  • 参数一xx:+EliminateAllocations:开启了标量替换(默认打开),允许将对象打散分配在栈上,比如对象拥有id和name两个字段,那么这两个字段将会被视为两个独立的局部变量进行分配

19、逃逸分析的不足

关于逃逸分析的论文在1999年就已经发表了,但直到JDK1.6才有实现,而且这项技术到如今也并不是十分成熟的。

其根本原因就是无法保证逃逸分析的性能消耗一定能高于他的消耗。虽然经过逃逸分析可以做标量替换、栈上分配、和锁消除。但是逃逸分析自身也是需要进行一系列复杂的分析的,这其实也是一个相对耗时的过程。 一个极端的例子,就是经过逃逸分析之后,发现没有一个对象是不逃逸的。那这个逃逸分析的过程就白白浪费掉了。

虽然这项技术并不十分成熟,但是它也是即时编译器优化技术中一个十分重要的手段。注意到有一些观点,认为通过逃逸分析,JVM会在栈上分配那些不会逃逸的对象,这在理论上是可行的,但是取决于JvM设计者的选择。据我所知,oracle Hotspot JVM中并未这么做,这一点在逃逸分析相关的文档里已经说明,所以可以明确所有的对象实例都是创建在堆上。

目前很多书籍还是基于JDK7以前的版本,JDK已经发生了很大变化,intern字符串的缓存和静态变量曾经都被分配在永久代上,而永久代已经被元数据区取代。但是,intern字符串缓存和静态变量并不是被转移到元数据区,而是直接在堆上分配,所以这一点同样符合前面一点的结论:对象实例都是分配在堆上。

20、堆小结

年轻代是对象的诞生、成长、消亡的区域,一个对象在这里产生、应用,最后被垃圾回收器收集、结束生命。

老年代放置长生命周期的对象,通常都是从survivor区域筛选拷贝过来的Java对象。

当然,也有特殊情况,我们知道普通的对象会被分配在TLAB上;

如果对象较大,无法分配在 TLAB 上,JVM会试图直接分配在Eden其他位置上;

如果对象太大,完全无法在新生代找到足够长的连续空闲空间,JVM就会直接分配到老年代。

当GC只发生在年轻代中,回收年轻代对象的行为被称为MinorGc。

当GC发生在老年代时则被称为MajorGc或者FullGC。

一般的,MinorGc的发生频率要比MajorGC高很多,即老年代中垃圾回收发生的频率将大大低于年轻代。