JVM笔记7：堆

一个JVM实例只存在一个堆内存，堆也是Java内存管理的核心区域。

Java 堆区在JVM 启动的时候即被创建，其空间大小也就确定了。是JVM管理的最大一块内存空间。

堆内存的大小是可以调节的（-Xms10m -Xmx10m）（初始值和最大值）。

《Java虚拟机规范》规定，堆可以处于物理上不连续的内存空间中，但在逻辑上它应该被视为连续的。

所有的线程共享Java堆，在这里还可以划分线程私有的缓冲区（ThreadLocal Allocation Buffer, TLAB)。

《Java虚拟机规范》中对Java堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。(The heap is the run-time data area fromwhich memory for all class instances and arrays is allocated )

我要说的是：“几乎”所有的对象实例都在这里分配内存。—从实际使用角度看的。

数组和对象可能永远不会存储在栈上，因为栈帧中保存引用，这个引用指向对象或者数组在堆中的位置。

在方法结束后，堆中的对象不会马上被移除，仅仅在垃圾收集的时候才会被移除。

堆，是GC ( Garbage Collection,垃圾收集器)执行垃圾回收的重点区域。

现代垃圾收集器大部分都基于分代收集理论设计，堆空间细分为:

java7和java8对比

2、设置堆内存大小与OOM

设置堆内存大小

Java堆区用于存储Java对象实例，那么堆的大小在JVM启动时就已经设定好了，大家可以通过选项”-Xmx”和"-Xms"来进行设置。

“-Xms”用于表示堆区的起始内存，等价于-xX:InitialHeapsize
“-Xmx”则用于表示堆区的最大内存，等价于-XX:MaxHeapsize

一旦堆区中的内存大小超过“-Xmx“所指定的最大内存时，将会抛出OutOfMemoryError异常。

通常会将-Xms 和-Xmx两个参数配置相同的值，其目的是为了能够在java垃圾回收机制清理完堆区后不需要重新分隔计算堆区的大小，从而提高性能。

默认情况下

初始内存大小:物理电脑内存大小 / 64
最大内存大小:物理电脑内存大小 / 4

/**
 * 1. 设置堆空间大小的参数
 * -Xms 用来设置堆空间（年轻代+老年代）的初始内存大小
 *      -X 是jvm的运行参数
 *      ms 是memory start
 * -Xmx 用来设置堆空间（年轻代+老年代）的最大内存大小
 *
 * 2. 默认堆空间的大小
 *    初始内存大小：物理电脑内存大小 / 64
 *             最大内存大小：物理电脑内存大小 / 4
 * 3. 手动设置：-Xms600m -Xmx600m
 *     开发中建议将初始堆内存和最大的堆内存设置成相同的值。
 *
 * 4. 查看设置的参数：方式一： jps   /  jstat -gc 进程id
 *                  方式二：-XX:+PrintGCDetails
 */
public class HeapSpaceInitial {
    public static void main(String[] args) {

        //返回Java虚拟机中的堆内存总量
        long initialMemory = Runtime.getRuntime().totalMemory() / 1024 / 1024;
        //返回Java虚拟机试图使用的最大堆内存量
        long maxMemory = Runtime.getRuntime().maxMemory() / 1024 / 1024;

        System.out.println("-Xms : " + initialMemory + "M");
        System.out.println("-Xmx : " + maxMemory + "M");

        System.out.println("系统内存大小为：" + initialMemory * 64.0 / 1024 + "G");
        System.out.println("系统内存大小为：" + maxMemory * 4.0 / 1024 + "G");

    }
}

Out0fMemory举例

3、年轻代与老年代

存储在JVM中的Java对象可以被划分为两类:

一类是生命周期较短的瞬时对象，这类对象的创建和消亡都非常迅速
另外一类对象的生命周期却非常长，在某些极端的情况下还能够与JVM的生命周期保持一致。

Java堆区进一步细分的话，可以划分为年轻代（YoungGen)和老年代（OldGen)

其中年轻代又可以划分为Eden空间、Survivor0空间和Survivor1空间(有时也叫做from区、to区)。

配置新生代与老年代在堆结构的占比

默认-XX: NewRatio=2,表示新生代占1,老年代占2,新生代占整个堆的1/3
可以修改-XX: Newrat1o=4,表示新生代占1,老年代占4,新生代占整个堆的1/5

在 Hot spot中,Eden空间和另外两个 Survivor空间缺省所占的比例是8:1:1

当然开发人员可以通过选项“-Ⅹ: SurvivorRatio”调整这个空间比例。比如-x: SurvivorRatlo=8

几乎所有的Java对象都是在Eden区被new出来的

绝大部分的Java对象的销毁都在新生代进行了

IBM公司的专门研究表明,新生代中80%的对象都是“朝生夕死”的。

可以使用选项"-Ⅹmn"设置新生代最大内存大小

这个参数一般使用默认值就可以了。

/**
 * -Xms600m -Xmx600m
 *
 * -XX:NewRatio ： 设置新生代与老年代的比例。默认值是2.
 * -XX:SurvivorRatio ：设置新生代中Eden区与Survivor区的比例。默认值是8
 * -XX:-UseAdaptiveSizePolicy ：关闭自适应的内存分配策略  （暂时用不到）
 * -Xmn:设置新生代的空间的大小。 （一般不设置）
 */
public class EdenSurvivorTest {
    public static void main(String[] args) {
        System.out.println("我只是来打个酱油~");
        try {
            Thread.sleep(1000000);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
    }
}

4、图解对象分配过程

为新对象分配内存是一件非常严谨和复杂的任务,JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行完内存回收后是否会在内存空间中产生内存碎片

1对象先放伊甸园区。此区有大小限制

2.当伊甸园的空间填满时,程序又需要创建对象,JVM的垃圾回收器将对伊甸园区进行垃圾回收( Minor gc),将伊甸园区中的不再被其他对象所引用的对象进行销毁。再加载新的对象放到伊甸园区

3.然后将伊甸园中的剩余对象移动到幸存者0区。

4.如果再次触发垃圾回收,此时上次幸存下来的放到幸存者0区的,如果没有回收,就会放到幸存者1区

5.如果再次经历垃圾回收,此时会重新放回幸存者0区,接着再去幸存者1区。

6.啥时候能去养老区呢?可以设置次数。默认是15次。

可以设置参数:-XX: MaxTenuringThreshold=<N>进行设置

7.在养老区,相对悠闲。当养老区内存不足时,再次触发GC: Major GC,进行养老区的内存清理

8.若养老区执行了 Major GC之后发现依然无法进行对象的保存,就会产生OOM异常

java.lang.OutofMemoryError: Java heap space

总结:

针对幸存者s0,s1区的总结:复制之后有交换,谁空谁是to.
于垃圾回收:频繁在新生区收集,很少在养老区收集,几乎不在永久区/元空间收集。

对象分配的特殊过程

JVisualVM演示

常用调优工具

JDK命令行
Eclipse: Memory Analyzer Tool
Jconsole
VisualVm
Jprofiler
Java
Flight
Recorder
GCViewer
GC Easy

5、Minor GC、 Major GC 与Full GC

JVM在进行GC时,并非每次都对上面三个内存（新生代、老年代；方法区）区域一起回收的,大部分时候回收的都是指新生代。

针对 Hotspot v的实现,它里面的GC按照回收区域又分为两大种类型:一种是部分收集( Partial GC),一种是整堆收集(Fu11Gc)

部分收集:不是完整收集整个Java堆的垃圾收集。其中又分为:

新生代收集( Minor GC/ Young GC):只是新生代（Eden\S0，S1）的垃圾收集
老年代收集( MaJor GC/ old GC):只是老年代的垃圾收集

目前,只有 CMS GC会有单独收集老年代的行为

注意,很多时候 Mayor GC会和Full GC混淆使用,需要具体分辨是老年代回收还是整堆回收。

混合收集( Mixed GC):收集整个新生代以及部分老年代的垃圾收集

目前,只有G1、GC会有这种行为·

整堆收集(Full GC):收集整个java堆和方法区的垃圾收集。

年轻代GC( Minor GC)触发机制:

当年轻代空间不足时,就会触发 Minor go,这里的年轻代满指的是Eden代满, Survivor满不会引发GC。(每次 Minor gC会清理年轻代的内存。)
因为Java对象大多都具备朝生夕灭的特性,所以 Minor gc非常频繁,一般回收速度也比较快。这一定义既清晰又易于理解。
Minor GC会引发STW（Stop-The-World）,暂停其它用户的线程,等垃圾回收结束,用户线程才恢复运行

老年代GC( Major GC/Full GC)触发机制:

指发生在老年代的GC,对象从老年代消失时,我们说“ Mayor GC”或“Full GC发生了
出现了 Major GC,经常会伴随至少一次的 Minor gc(但非绝对的,在Parallel Scavenge收集器的收集策略里就有直接进行 Major GC的策略选择过程)

也就是在老年代空间不足时,会先尝试触发 Minor gc。如果之后空间还不足,则触发 Major GC

Major GC的速度一般会比 Minor go慢10倍以上,STW的时间更长
如果 Magor GC后,内存还不足,就报OOM了
Major GC的速度一般会比 Minor gc慢10倍以上。

Full GC触发机制:

触发Full GC执行的情况有如下五种:

(1)调用 System. gc()时,系统建议执行Full GC,但是不必然执行
(2)老年代空间不足
(3)方法区空间不足
(4)通过 Minor gc后进入老年代的平均大小大于老年代的可用内存
(5)由Eden区、 survivor space0( From Space)区向 survivor space1(TSpace)区复制时,对象大小大于 To Space可用内存,则把该对象转存到老年代,且老年代的可用内存小于该对象大小

说明:full gc是开发或调优中尽量要避免的。这样暂时时间会短一些。

6、堆空间分代思想

为什么需要把Java堆分代?不分代就不能正常工作了吗?

经研究,不同对象的生命周期不同。70%-99%的对象是临时对象

新生代:有Eden、两块大小相同的 Survivor(又称为from/to,s0/s1)构成,to总为空。
老年代:存放新生代中经历多次GC仍然存活的对象。

其实不分代完全可以,分代的唯一理由就是优化GC性能。如果没有分代,那所有的对象都在一块,就如同把一个学校的人都关在一个教室。GC的时候要找到哪些对象没用这样就会对堆的所有区域进行扫描。而很多对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储“朝生夕死”对象的区域进行回收,这样就会腾出很大的空间出来。

7、内存分配策略

如果对象在Eden出生并经过第一次 MinorGC后仍然存活,并且能被 Survivor容纳的话,将被移动到 Survivor空间中,并将对象年龄设为1。对象在Survivor区中每熬过一次 MinorGC,年龄就增加1岁,当它的年龄增加到一定程度(默认为15岁,其实每个JVM、每个GC都有所不同)时,就会被晋升到老年代中

对象晋升老年代的年龄阈值,可以通过选项- XX: MaxrenuringThreshold来设置

针对不同年龄段的对象分配原则如下所示:

优先分配到Eden
大对象直接分配到老年代

尽量避免程序中出现过多的大对象

长期存活的对象分配到老年代
动态对象年龄判断

如果 Survivor区中相同年龄的所有对象大小的总和大于 Survivor空间的一半,年龄大于或等于该年龄的对象可以直接进入老年代,无须等到MaxTenuringThreshold中要求的年龄。

空间分配担保

XX: HandlePromotionFailure

/** 测试：大对象直接进入老年代
 * -Xms60m -Xmx60m -XX:NewRatio=2 -XX:SurvivorRatio=8 -XX:+PrintGCDetails
 */
public class YoungOldAreaTest {
    public static void main(String[] args) {
        byte[] buffer = new byte[1024 * 1024 * 20];//20m

    }
}

8、为对象分配内存:TLAB

为什么有TLAB( Thread Local Allocation Buffer)?

堆区是线程共享区域,任何线程都可以访问到堆区中的共享数据

由于对象实例的创建在JⅥ中非常频繁,因此在并发环境下从堆区中划分内存空间是线程不安全的

为避免多个线程操作同一地址,需要使用加锁等机制,进而影响分配速度

什么是TLAB?

从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分,JWM为每个线程分配了一个私有缓存区域没它包含在Eden空间内

多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题同时还能够提升内存分配的吞吐量,因此我们可以将这种内存分配方式称之为快速分配策略

据我所知所有 OpenJDK衍生出来的JVM都提供了TLAB的设计。

尽管不是所有的对象实例都能够在LAB中成功分配内存,但JM确实是将TLAB作为内存分配的首选。

在程序中,开发人员可以通过选项“-X×: UseTLAB”设置是否开启TLAB空间

默认情况下,TLAB空间的内存非常小,仅占有整个Eden空间的1%,当然我们可以通过选项“-ⅩX: TLABWasteTargetpercent”设置TLAB空间所占用Eden空间的百分比大小。

一旦对象在AB空间分配内存失败时,JVM就会尝试着通过使用加锁机制确保数据操作的原子性,从而直接在Eden空间中分配内存

9、小结堆空间的参数设置

官网说明

-XX:+PrintFlagsInitial:査看所有的参数的默认初始值

-XX:+PrinteFlagsFinal:查看所有的参数的最终值(可能会存在修改不再是初始值)

具体查看某个参数的指令： jps：查看当前运行中的进程
jinfo -flag SurvivorRatio 进程id

-Xms:初始堆空间内存(默认为物理内存的1/64)

-Xmx:最大堆空间内存(默认为物理内存的1/4)

-Xmn:设置新生代的大小。(初始值及最大值)

-XX:NewRatio:配置新生代与老年代在堆结构的占比

-XX:SurvivorRatio：设置新生代中Eden和S0/S1空间的比例

-XX:MaxTenuringThreshold：设置新生代垃圾的最大年龄

-XX:+PrintGCDetails：输出详细的GC处理日志
打印gc简要信息：① -XX:+PrintGC ② -verbose:gc

-XX:HandlePromotionFailure：是否设置空间分配担保

10、堆是分配对象存储的唯一选择？

在《深入理解Java虚拟机》中关于Java堆内存有这样一段描述

随着JIT编译期的发展与逃逸分析技术逐渐成熟,栈上分配、标量替换优化技术将会导致一些微妙的变化,所有的对象都分配到堆上也渐渐变得不那么“绝对”了

在Java虚拟机中,对象是在Java堆中分配内存的,这是一个普遍的常识。但是,有种特殊情况,那就是如果经过逃逸分析( Escape Analysis)后发现,一个对象并没有逃逸出方法的话,那么就可能被优化成栈上分配。这样就无需在堆上分配内存,也无须进行垃圾回收了。这也是最常见的堆外存储技术

此外,前面提到的基于 OpenJDK深度定制的TaoBaoVM,其中创新的GCIH(GCinvisible heap)技术实现off-heap,将生命周期较长的Java对象从heap中移至heap外,并且GC不能管理GCIH内部的Java对象,以此达到降低GC的回收频率和提升GC的回收效率的目的

逃逸分析概述

如何将堆上的对象分配到栈,需要使用逃逸分析手段

这是一种可以有效减少Java程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。

通过逃逸分析, Java Hotspot编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。

逃逸分析的基本行为就是分析对象动态作用域

当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸
当一个对象在方法中被定义后,它被外部方法所引用,则认为发生逃逸。例如作为调用参数传递到其他地方中。

参数设置:

在JDK 6u23版本之后, Hotspot中默认就已经开启了逃逸分析

如果使用的是较早的版本,开发人员则可以

通过选项“-XX:+DOEscapeAnalysis"显式开启逃逸分析
通过选项“-ⅩX:+PrintEscapeAnalysis"查看逃逸分析的筛选结果。

逃逸分析代码：

/**
 * 逃逸分析
 *
 *  如何快速的判断是否发生了逃逸分析，大家就看new的对象实体是否有可能在方法外被调用。
 */
public class EscapeAnalysis {

    public EscapeAnalysis obj;

    /*
    方法返回EscapeAnalysis对象，发生逃逸
     */
    public EscapeAnalysis getInstance(){
        return obj == null? new EscapeAnalysis() : obj;
    }
    /*
    为成员属性赋值，发生逃逸
     */
    public void setObj(){
        this.obj = new EscapeAnalysis();
    }
    //思考：如果当前的obj引用声明为static的？仍然会发生逃逸。

    /*
    对象的作用域仅在当前方法中有效，没有发生逃逸
     */
    public void useEscapeAnalysis(){
        EscapeAnalysis e = new EscapeAnalysis();
    }
    /*
    引用成员变量的值，发生逃逸
     */
    public void useEscapeAnalysis1(){
        EscapeAnalysis e = getInstance();
        //getInstance().xxx()同样会发生逃逸
    }
}

逃逸分析：代码优化

使用逃逸分析,编译器可以对代码做如下优化:

一、栈上分配。将堆分配转化为栈分配。如果一个对象在子程序中被分配要使指向该对象的指针永远不会逃逸,对象可能是栈分配的候选,而不是堆分配

二、同步省略。如果一个对象被发现只能从一个线程被访问到,那么对于这个对象的操作可以不考虑同步、

三、分离对象或标量替换。有的对象可能不需要作为一个连续的内存结构存在也可以被访问到,那么对象的部分(或全部)可以不存储在内存,而是存储在CPU寄存器中。

JIT编译器在编译期间根据逃逸分析的结果,发现如果一个对象并没有逃逸出方法的话,就可能被优化成栈上分配。分配完成后,继续在调用栈内执行,最后线程结束,栈空间被回收,局部变量对象也被回收。这样就无须进行垃圾回收了。

常见的栈上分配的场景

在逃逸分析中,已经说明了。分别是给成员变量赋值、方法返回值实例引用传递。

线程同步的代价是相当高的,同步的后果是降低并发性和性能

在动态编译同步块的时候,JIT编译器可以借助逃逸分析来判断同步块所使用的锁对象是否只能够被一个线程访问而没有被发布到其他线程。如果没有,那么J哩编译器在编译这个同步块的时候就会取消对这部分代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫同步省略,也叫锁消除

标量( Scalar)是指一个无法再分解成更小的数据的数据。Java中的原始数据类型就是标量

相对的,那些还可以分解的数据叫做聚合量( Aggregate),Java中的对象就是聚合量,因为他可以分解成其他聚合量和标量。

在JIT阶段,如果经过逃逸分析,发现一个对象不会被外界访问的话,那么经过J工优化,就会把这个对象拆解成若干个其中包含的若干个成员变量来代替。这个过程就是标量替换。

标量替换参数设置：

参数-ⅩX:+EliminateAllocations:开启了标量替换(默认打开),允许将对象打散分配在栈上

/**
 * 栈上分配测试
 * -Xmx1G -Xms1G -XX:-DoEscapeAnalysis -XX:+PrintGCDetails
 */
public class StackAllocation {
    public static void main(String[] args) {
        long start = System.currentTimeMillis();

        for (int i = 0; i < 100000000; i++) {
            alloc();
        }
        // 查看执行时间
        long end = System.currentTimeMillis();
        System.out.println("花费的时间为： " + (end - start) + " ms");
        // 为了方便查看堆内存中对象个数，线程sleep
        try {
            Thread.sleep(1000000);
        } catch (InterruptedException e1) {
            e1.printStackTrace();
        }
    }

    private static void alloc() {
        User user = new User();//未发生逃逸
    }

    static class User {

    }
}

上述代码在主函数中进行了1亿次alloc。调用进行对象创建,由于User对象实例需要占据约16字节的空间,因此累计分配空间达到将近1.5GB。如果堆空间小于这个值,就必然会发生GC。使用如下参数运行上述代码:

11、小结

年轻代是对象的诞生、成长、消亡的区域,一个对象在这里产生、应用最后被垃圾回收器收集、结束生命。

老年代放置长生命周期的对象,通常都是从 Survivor区域筛选拷贝过来的Java对象。当然,也有特殊情况,我们知道普通的对象会被分配在TLAB上如果对象较大,JVM会试图直接分配在Eden其他位置上;如果对象太大,完全无法在新生代找到足够长的连续空闲空间,JVM就会直接分配到老年代

当GC只发生在年轻代中,回收年轻代对象的行为被称为 MinorGC。当GC发生在老年代时则被称为 MajorGC或者Full GC。一般的, Minora的发生频率要比 Major GC高很多,即老年代中垃圾回收发生的频率将大大低于年轻代。