一、JVM内存分配与回收
下图为堆内存结构图(注意:元数据区(MetaData )实际上不属于堆):
1、对象优先在Eden区分配
大多数情况下,对象在新生代中Eden区分配。当Eden区没有足够空间进行分配时,JVM将发起一次Minor GC。
提问:Minor GC和Full GC有什么不同呢?
- 新生代GC(Minor GC / Young GC):指发生在新生代的垃圾收集动作,新生代空间耗尽时触发。Minor GC非常频繁,回收速度一般也比较快。
- 老年代GC(Major GC / Full GC):指发生在老年代的GC,在老年代无法继续分配空间时触发。出现了Full GC会伴随至少一次的Minor GC(并非绝对),Full GC的速度一般会比Minor GC慢10倍以上。
例子:定义一个GCTest类。
通过以下方式运行:
添加的参数:-XX:+PrintGCDetails
运行结果:
从上图我们可以看出eden区内存几乎已经被分配完全(即使程序什么也不做,新生代也会使用至少2000多k内存)。
提问:假设我们再为allocation2分配内存会出现什么情况呢?
简单解释一下为什么会出现这种情况:因为给allocation2分配内存的时候eden区内存几乎已经被分配完了,前面讲了当Eden区没有足够空间进行分配时,虚拟机将发起一次Minor GC,GC期间JVM又发现allocation1无法存入Survior空间,因为allocation1对象占30M,而Survior区只有5M+5M,所以只好通过分配担保机制把新生代的对象提前转移到老年代中去,老年代上的空间足够存放allocation1,所以不会出现Full GC。执行Minor GC后,后面分配的对象如果能够存在eden区的话,还是会在eden区分配内存。可以执行以下代码验证:
2、大对象直接进入老年代
大对象就是需要大量连续内存空间的对象(比如:字符串、数组)。
提问:为什么要这样呢?
为了避免对大对象分配内存时由于分配担保机制带来的复制而降低效率。
3、长期存活的对象将进入老年代
既然虚拟机采用了分代收集的思想来管理内存,那么内存回收时就必须能识别哪些对象应放在新生代,哪些对象应放在老年代中。为了做到这一点,JVM给每个对象一个对象年龄(Age)计数器。
如果对象在Eden区出生并经过第一次Minor GC后仍然能够存活,并且能被Survior区容纳的话,将被移动到Survior区中,并将对象年龄设为1。对象在Survior区中每熬过一次Minor GC,年龄就增加1岁,当它的年龄增加到一定程度(默认为15岁),就会被晋升到老年代中。对象晋升到老年代的年龄阈值,可以通过参数-XX:MaxTenuringThreshold来设置。
二、如何判断对象可以被回收
堆中几乎放着所有的对象实例,对堆垃圾回收前的第一步就是要判断哪些对象已经死亡(即不能再被任何途径使用的对象)。
1、引用计数法
给对象中添加一个引用计数器,每当有一个地方引用它,计数器就加1;当引用失效,计数器就减1;任何时候计数器为0的对象就是不可能再被使用的。
这个方法实现简单,效率高,但是目前主流的JVM中并没有选择这个算法来管理内存,其最主要的原因是它很难解决对象之间相互循环引用的问题。所谓对象之间的相互引用问题,如下面代码所示:除了对象objA和objB相互作用着对方之外,这两个对象之间再无任何引用。但是它们因为互相引用对方,导致它们的引用计数器都不为0,于是引用计数算法无法通知GC回收器回收它们。
2、可达性分析算法
这个算法的基本思想就是通过一系列的称为“GC Roots”的对象作为起点,从这些节点开始向下搜索,节点所走过的路径称为引用链,当一个对象到GC Roots没有任何引用链相连的话,则证明此对象是不可用的。
GC Roots根节点:类加载器、Thread、虚拟机栈的本地变量表、static成员、常量引用、本地方法栈的变量等等。
3、finalize()方法最终判定对象是否存活
即使在可达性分析算法中不可达的对象,也并非是“非死不可”的,这时候它们暂时处于“缓刑”阶段,要真正宣告一个对象死亡,至少要经历再次标记过程。
标记的前提是对象在进行可达性分析后发现没有与GC Roots相连接的引用链。
(1)第一次标记并进行一次筛选
筛选的条件是此对象是否有必要执行finalize()方法。
当对象没有覆盖finalize()方法,或者finalize()方法已经被JVM调用过,JVM将这两种情况都视为“没有必要执行”,对象被回收。
(2)第二次标记
如果这个对象被判定为有必要执行finalize()方法,那么这个对象将会被放置在一个名为:F-Queue的队列之中,并在稍后由一条JVM自动建立的、低优先级的Finalizer线程去执行。这里所谓的“执行”是指JVM会触发这个方法,但并不承诺会等待它运行结束。这样做的原因是,如果一个对象finalize()方法中执行缓慢,或者发生死循环(更极端的情况),将很可能会导致F-Queue队列中的其他对象永久处于等待状态,甚至导致整个内存回收系统崩溃。
finalize()方法是对象逃脱死亡命运的最后一次机会,稍后GC将对F-Queue中的对象进行第二次小规模标记,如果对象要在finalize()中成功拯救自己(自救)——只要重新与引用链上的任何一个对象建立关联即可,比如把自己赋值给某个类变量或对象的成员变量,那在第二次标记时它将移除出“即将回收”的集合。如果对象这时候还没逃脱,那基本上它就真的被回收了。
例子:定义一个OOMTest类。
list中的User对象被引用,不会被回收;而下一行的User对象没有被引用,所以会被GC回收。
User类重写finalize()方法,每次GC都会调用User对象的finalize()方法:
运行结果:
分析:都是id为负数的User对象被回收。说明确实是list中的id为正数的User对象不会被回收,而下一行id为负数的对象则被回收。(程序最终会内存溢出,因为List对象越来越大)
4、如何判断一个常量是废弃常量
提问:运行时常量池主要回收的是废弃的常量。那么,我们如何判断一个常量是废弃常量呢?
假如在常量池中存在字符串“abc”,如果当前没有任何String对象引用该字符串常量的话,就说明常量“abc”就是废弃常量,如果这时发送内存回收而且有必要的话,“abc”就会被系统清理出常量池。
5、如何判断一个类是无用的类
提问:方法区主要回收的是无用的类,那么如何判断一个类是无用的类呢?
判定一个常量是否是“废弃常量”比较简单,而要判定一个类是否是“无用的类”的条件则相对苛刻许多。
类需要同时满足下面3个条件才能算是“无用的类”:
- 该类所有的实例都已经被回收,也就是说Java堆中不存在该类的任何实例
- 加载该类的ClassLoader已经被回收
- 该类对应的java.string.Class对象没有在任何地方被引用,无法在任何地方通过反射访问该类的方法
JVM可以对满足上述3个条件的无用类进行回收,这里说的仅仅是“可以”,而并不是和对象一样不使用了就必然会被回收。
三、垃圾收集算法
1、标记-清除算法
算法分为“标记”和“清除”阶段:首先标记出所有需要回收的对象,在标记完成后统一回收所有被标记的对象。它是最基础的收集算法,但是会带来两个明显的问题:
(1)效率问题
(2)空间问题(标记清除后会产生大量不连续的碎片)
2、复制算法
为了解决效率问题,“复制”收集算法出现了。它可以将内存分为大小相同的两块,每次使用其中的一块。当这一块的内存使用完后,就将还存活的对象复制到另一块去,然后再把使用的空间一次清理掉。这样就使每次的内存回收都是对内存区间的一半进行回收。(比较适合内存相对较小的Survivor区中的From和To)
3、标记-整理算法
根据老年代的特点推出的一种标记算法,标记过程仍然与“标记-清除“算法一样,但后续步骤不是直接对可回收对象进行回收,而是让所有存活的对象向一端移动,然后直接清理掉端边界以外的内存。
4、分代收集算法
当前JVM的垃圾收集都采用分代收集算法,这种算法没有什么新的思想,只是根据对象存活周期的不同将内存分为几块。一般将Java堆分为新生代和老年代,这样我们就可以根据各个年代的特点选择合适的垃圾收集算法。
比如在新生代中,每次收集都会有大量对象死去,所以可以选择复制算法,只需要付出少量对象的复制成本就可以完成每次垃圾收集。而老年代的对象存活几率是比较高的,而且没有额外的空间对它进行分配担保,所以我们必须选择“标记-清除”或“标记-整理”算法进行垃圾收集。
四、垃圾收集器
如果说垃圾收集算法是内存回收的方法论,那么垃圾收集器就是内存回收的具体实现。
虽然我们对各个收集器进行比较,但并非为了挑选出一个最好的收集器。因为直到现在为止还没有最好的垃圾收集器出现,更加没有万能的垃圾收集器,我们能做的就是根据具体应用场景选择适合自己的垃圾收集器。试想一下:如果有一种四海之内、任何场景都使用的完美收集器存在,那么我们的HotSpot虚拟机就不会实现那么多不同的垃圾收集器了。
1、Serial收集器
Serial(串行)收集器是最基本、历史最悠久的垃圾收集器了。看名字就可以知道这是一个单线程收集器。它的“单线程”不仅仅意味着它只会使用一条垃圾收集线程去完成收集工作,更重要的是它在进行垃圾收集工作的时候必须暂停其他所有的工作线程(“Stop The World”),直到它收集结束。
采用分代收集算法:新生代采用复制算法,老年代采用标记-整理算法。
JVM的设计者们当然知道Stop The World带来的不良用户体验,所以在后续的垃圾收集器设计中停顿时间在不断缩短(仍然还有停顿,寻找最优秀的垃圾收集器的过程仍在继续)。
但是Serial收集器有没有优于其他垃圾收集器的地方呢?当然有,它简单而高效(与其他收集器的单线程相比)。Serial收集器由于没有线程交互的开销,自然可以获得很高的单线程收集效率。
2、ParNew收集器
ParNew收集器其实就是Serial收集器的多线程版本,除了使用多线程进行垃圾收集外,其余行为(控制参数、收集算法、回收策略等等)和Serial收集器完全一样。
采用分代收集算法:新生代采用复制算法,老年代采用标记-整理算法。
它是许多运行在Server模式下的JVM的首要选择,除了Serial收集器外,只有它能与CMS收集器(真正意义上的并发收集器,后面会介绍到)配合工作。
并行和并发的概念补充:
- 并行(Parallel):指多条垃圾收集线程并行工作,但此时用户线程仍然处于等待状态。适合科学计算、后台处理等弱交互场景。
- 并发(Concurrent):指用户线程与垃圾收集线程同时执行(但不一定是并行,可能会交替执行),用户程序在继续运行,而垃圾收集器运行在另一个CPU上,适合Web应用。
3、Parallel Scavenge收集器(-XX:+UseParallelGC(新生代),-XX:+UseParallelOldGC(老年代))
Parallel Scavenge收集器类似于ParNew收集器,是Server模式(内存大于2G,2个CPU)下的默认收集器(JDK 8),那么它有什么特别之处呢?
Parallel Scavenge收集器关注点是吞吐量(高效率的利用CPU)。CMS等垃圾收集器的关注点更多是用户线程的停顿时间(提高用户体验)。所谓吞吐量就是CPU中用于运行用户代码的时间与CPU总消耗时间的比值。Parallel Scavenge收集器提供了很多参数供用户找到最合适的停顿时间或最大吞吐量,如果对于收集器运行不太了解的话,可以选择把内存管理优化交给JVM去完成也是一个不错的选择。
采用分代收集算法:新生代采用复制算法,老年代采用标记-整理算法。
4、Serial Old收集器
Serial收集器的老年代版本,它同样是一个单线程收集器。它主要有两大用途:一种用途是在JDK 1.5及以前的版本中与Parallel Scavenge收集器搭配使用,另一种用途是作为CMS收集器的后备方案。
5、Parallel Old收集器
Parallel Scavenge收集器的老年代版本。使用多线程和“标记-整理”算法。在注重吞吐量以及CPU资源的场合,都可以优先考虑Parallel Scavenge收集器和Parallel Old收集器。
6、CMS收集器(-XX:+UseConcMarkSweepGC(old) -XX:+UseParNewGC)
CMS(Concurrent Mark Sweep)收集器是一种以获取最短回收停顿时间为目标的收集器。它非常符合在注重用户体验的应用上使用,它是HotSpot虚拟机第一款真正意义上的并发收集器,它第一次实现了让垃圾收集线程与用户线程(基本上)同时工作。
从名字中的Mark Sweep这两个词可以看出,CMS收集器是一种“标记-清除”算法实现的,它的运作过程相比于前面几种垃圾收集器来说更加复杂一些。整个过程分为四个步骤:
- 初始标记:暂停所有的其他线程(STW),并记录下直接与GC Roots相连的对象,速度很快。
- 并发标记:同时开启GC和用户线程,用一个闭包结构去记录可达对象。但在这个阶段结束,这个闭包结构并不能保证包含当前所有的可达对象。因为用户线程可能会不断的更新引用域,所以GC线程无法保证可达性分析的实时性。所以这个算法里会跟踪记录这些发生引用更新的地方。
- 重新标记:重新标记阶段就是为了修正并发标记期间因为用户程序继续运行而导致标记产生变动的那一部分对象的标记对象,这个阶段的停顿时间一般会比初始标记阶段的时间稍长,远远比并发标记阶段时间短。
- 并发清除:开启用户线程,同时GC线程开始对未标记的区域做清扫。
从它的名字就可以看出它是一款优秀的垃圾收集器,主要优点:并发收集、低停顿。但是它有下面三个明显的缺点:
- 对CPU资源敏感(会和服务抢资源)
- 无法处理浮动垃圾(在Java业务程序线程与垃圾收集线程并发执行过程中又产生的垃圾,这种浮动垃圾只能等到下一次GC再清理了)
- 它使用的回收算法“标记-清除”算法会导致收集结束时会有大量空间碎片产生
CMS的相关参数:
① -XX:+UseConcMarkSweepGC启动CMS
② -XX:ConcGCThreads:并发的GC线程数(并非STW时间,而是和服务一起执行的线程数)
③ -XX:+UseCMSCompactAtFullCollection:Full GC之后做压缩(减少碎片)
④ -XX:CMSFullGCsBeforeCompaction:多少次Full GC之后压缩一次(因压缩非常消耗时间,所以不能每次Full GC都做)
⑤ -XX:CMSlnitiatingOccupancyFraction:触发Full GC的条件(默认是92)
⑥ -XX:+UseCMSSlnitiatingOccupanyOnly:是否动态调节
⑦ -XX:+CMSScavengeBeforeRemark:Full GC之前先做YGC(一般这个参数是打开的)
⑧ -XX:+CMSClassUnloadingEnabled:启动回收Perm区(JDK 1.7及以前)
7、G1收集器(-XX:+UseG1GC)
G1(Garbage-First)是一款面向服务器的垃圾收集器(JDK 9默认收集器),主要针对配备多颗处理器及大容量内存的机器,以极高概率满足GC停顿时间要求的同时,还具备高吞吐量性能特征。
G1将Java堆划分为多个大小相等的独立区域(Region),虽保留新生代和老年代的概念,但不再是物理隔阂了,它们都是(可以不连续) Region的集合。
分配大对象(直接进入Humongous区,专门存放短期巨型对象,不用直接进老年代,避免Full GC的大量开销)不会因为无法找到连续空间而提前触发下一次GC。
被视为JDK 1.7中HotSpot虚拟机的一个重要进化特征。它具备以下特点:
- 并发与并行:G1能充分利用CPU、多核环境下的硬件优势,使用多个CPU(CPU或者CPU核心)来缩短Stop The World停顿时间。部分其他收集器原本需要停顿Java线程来执行GC动作,G1收集器仍然可以通过并发的方式来让Java程序继续运行。
- 分代收集:虽然G1可以不需要其他收集器配合就能独立管理整个GC堆,但是还是保留了分代的概念。
- 空间整合:与CMS的“标记-清理”算法不同,G1从整体来看是基于“标记整理”算法实现的收集器;从局部上来看是基于“复制”算法实现的。
- 可预测的停顿:这是G1相对于CMS的另一个大优势,降低停顿时间是G1和CMS共同的关注点,但G1除了追求低停顿外,还能建立可预测的停顿时间模型,能让使用者明确指定在一个长度为M毫秒的时间片段内完成垃圾收集。
G1收集器的运作大致分为以下几个步骤:
- 初始标记(initial mark,STW):在此阶段,G1 GC对根进行标记。该阶段与常规的(STW)新生代垃圾回收密切相关。
- 并发标记(Concurrent Marking):G1 GC在整个堆中查找可访问的(存活的)对象。
- 最终标记(Remark,STW):该阶段是STW回收,帮助完成标记周期。
- 筛选回收(Cleanup,STW):筛选回收阶段首先对各个Region的回收价值和成本进行排序,根据用户所期望的GC停顿时间来制定回收计划,这个阶段其实也可以做到与用户程序一起并发执行,但是因为只回收一部分Region,时间是用户可控制的,而且停顿用户线程将大幅提高收集效率。
G1收集器在后台维护了一个优先列表,每次根据允许的收集时间,优先选择回收价值最大的Region(这也就是它的名字Garbage-First的由来)。这种使用Region划分内存空间以及有优先级的区域回收方式,保证了G1收集器在有限时间内可以尽可能高的收集效率。
G1垃圾收集分类:
Young GC:
- ① 新对象进入Eden区
- ② 存活对象拷贝到Survivor区
- ③ 存活时间达到年龄阈值时,对象晋升到Old区
Mixed GC:
- ① 不是Full GC,回收所有的Young和部分Old(根据期望的GC停顿时间确定Old区垃圾收集的有限顺序)
- ② global concurrent marking(全局并发标记)
- a. Initial marking phase:标记GC Root,STW
- b. Root region scanning phase:标记存活Region
- c. Concurrent marking phase:标记存活的对象
- d. Remark phase:重新标记,STW
- ③ 修改参数
- a. G1MixedGCLiveThresholdPercent:Old区的region被回收的时候的存活对象占比
- b. G1MixedGCCountTarget:一次global concurrent marking之后,最多执行Mixed GC的次数
- c. G1OldCSetRegionThresholdPercent:一次Mixed GC中能被选入CSet的最多old区的region数量
- ④ 触发的时机
- a. InitiatingHeapOccupancyPercent:堆占有率达到这个值则触发global concurrent marking,默认为45%
- b. G1HeapWastePercent:在global concurrent marking结束之后,可以知道区有多少空间要被回收,在每次YGC之后和再次发生Mixed GC之前,会检查垃圾占比是否达到了此参数,只有达到了,下次才会发生Mixed GC
五、如何选择垃圾收集器
1、优先调整堆的大小让服务器自己来选择
2、如果内存小于100M,使用串行收集器
3、如果是单核,并且没有停顿时间的要求,串行或JVM自己选择
4、如果允许停顿时间超过1秒,选择并行或者JVM自己选择
5、如果响应时间最重要,并且不能超过1秒,使用并发收集器
下图有连线的可以搭配使用,官方推荐使用G1,因为性能高