堆
堆(Heap)的核心概述
- 一个JVM实例只存在一个堆内存,对也是Java内存管理的核心区域。
- Java堆区在JVM启动的时候即被创建,其空间大小也就确定了。是JVM管理的最大一块内存空间。
- 堆内存的大小是可以调节的。
- 《Java虚拟机规范》规定,堆可以处于物理上不连续的空间中,但在逻辑上它应该被视为连续的。
- 所有的线程共享Java堆,在这里还可以划分为线程私有的缓冲区(Thread Local Allocation Buffer,TLAB)。
- 《Java虚拟机规范》中对Java堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。(The heap is the run-time data area from which memory for all class instances and arrays is allocated)
- 我要说的是:“几乎”所有的对象实例都在这里分配内存。—从实际使用角度看的
- 数组和对象可能永远不会存储在栈上,因为栈帧中保存引用,这个引用指向对象或者数组在堆中的位置。
- 在方法结束后,堆中的对象不会马上被移除,仅仅在垃圾收集的时候才会被移除。
- 堆,是GC(Garbage Collection,垃圾收集器)执行垃圾回收的重点区域
内存细节
现代垃圾收集器大部分都基于分代收集理论设计,堆空间分为:
JDK 7 的堆内存
JDK 8 的堆内存
堆内存的大小与OOM
- Java堆区用于存储Java对象实例,那么堆的大小在JVM启动时就已经设定好了,大家可以通过选项"-Xmx"和"-Xms"来进行设置。
- "-Xms"用于表示堆区的起始内存,等价于-XX:InitialHeapSize
- "-Xmx"用于表示堆区的最大内存,等价于-XX:MaxHeapSize
- 一旦堆区中的内存大小超过"-Xmx"所指定的最大内存时,将会抛出OutOfMemoryError异常。
- 通常会将 -Xms和-Xmx两个参数配置相同的值,其目的是为了能够在Java垃圾回收机制清理完堆区后不需要重新分隔计算堆区的大小,从而提高性能
- 默认情况下,初始内存大小:物理电脑内存大小/64
- 最大内存:物理电脑内存大小/4
OutOfMemory 举例
/**
* @program: JVMDemo
* @description: etst
* @author: 郑朝文
* @create: 2021-08-21 19:53
**/
class OOM{
byte[] ll ;
public OOM(){};
public OOM(int length){
this.ll=new byte[length];
}
}
public class OOMTest {
public static void main(String[] args) {
ArrayList<OOM> arrayList = new ArrayList<>();
while (true){
try {
Thread.sleep(20);
} catch (InterruptedException e) {
e.printStackTrace();
}
arrayList.add(new OOM(new Random().nextInt(1024*1024)));
}
}
}
年轻代与老年代
- 存储在JVM中的Java对象可以被划分为两类:
- 一类是生命周期较短的瞬时对象,这类对象的创建和消亡都非常迅速。
- 另外一类对象的生命周期却非常长,在某些极端的情况下还能够与JVM的生命周期保持一致
- Java堆区进一步细分的话,可以划分为年轻代(YoungGen)和老年代(OldGen)
- 其中年轻代又可以划分为Eden空间、Survivor0空间和Survivor1空间(有时也叫作from区、to区)。
下面这些参数一般不会调
- 配置新生代与老年代在堆结构的占比。
- 默认-XX:NewRatio=2,表示新生代占1,老年代占2,新生代占整个堆的1/3
- 可以修改-XX:NewRatio=4,表示新生代占1,老年代占4,新生代占整个堆的1/5
- 在Hotspot中,Eden空间和另外两个Survivor空间缺省所占的比例是8:1:1
- 当然开发人员可以通过选项"-XX:SurvivorRatio"调整这个空间比例。比如-XX:SurvivorRatio=8
- 几乎所有的Java对象都是在Eden区域被new出来的。
- 绝大部分的Java对象的销毁都在新生代进行了
- IBM公司的专门研究表明,新生代中80%的对象都是"朝生夕死"
- 可以使用选项“-Xmn”设置新生代最大内存大小
- 这个参数一般使用默认值就可以了。
- 这个参数一般使用默认值就可以了。
图解对象的分配过程
概述
为新对象分配内存是一件非常严谨和复杂的任务,JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行完毕内存回收是否会在内存空间中产生内存碎片。
- 1、new的对象先放Eden区,此区有大小限制。
- 2、当Eden区的空间填满时,程序又需要创建对象,JVM的垃圾回收器将对Eden区进行垃圾回收(Minor GC) ,将Eden区中的不再被其他对象引用的对象进行销毁。再加载新的对象放到Eden区。
- 3、然后将Eden区中的剩余对象移动到Survivor0区。
- 4、如果再次触发垃圾回收,此时上次幸存下来的放到Survivor0区的,如果没有被回收,就会放到Survivor1区。
- 5、如果再次经历垃圾回收,此时会重新放回Survivor0区,接着再去Survivor区。
- 6、啥时候能去养老区呢?可以设置次数。默认是15次
- 可以设置参数:-XX:MaxTenuringThreshold=< N >进行设置
- 7、在养老区,相对悠闲。当养老区内存不足时,再次触发GC:Major GC,进行养老区的内存清理。
- 8、若养老区执行了Major GC之后发现依然无法进行对象保存,就会产生OOM异常
java.lang.OutOfMemoryError:Java heap space
- 总结:
- 针对Survivor0,Survivor1区的总结:复制之后有交换,谁空谁是to。
- 关于垃圾回收:频繁在新生区收集,很少在养老区收集,几乎不再永久区/元空间收集。
Minor GC、Major GC与Full GC
JVM在进行GC时,并非每次都对上面三个内存(新生代、老年代:方法区)区域一起回收的,大部分时候回收的都是指新生代。
针对Hotspot VM的实现,它里面的GC按照回收区域又分为两大种类型:一种是部分收集(Partial GC),一种是整堆收集(Full GC)
- 部分收集:不是完整收集整个Java堆的垃圾收集。其中又分为:
- 新生代收集(Minor GC/Young GC):只是新生代的垃圾收集
- 老年代收集(Major GC/Old GC): 只是老年代的垃圾收集。
- 目前,只有CMS GC会有单独收集老年代的行为
- 注意,很多时候Major GC会和Full GC混淆使用,需要具体分辨是老年代回收还是整堆回收
- 混合收集(Mixed GC):收集整个新生代以及部分老年代的垃圾收集。
- 目前,只有G1 GC会有这种行为。
- 整堆收集(Full GC):收集整个Java堆和方法区的垃圾收集。
最简单分代式GC策略的触发条件
- 年轻代GC(Minor GC)触发机制:
- 当年轻代空间不足时,就会触发Minor GC,这里的年轻代满指的是Eden区满,Survivor满不会引发GC。(每次 Minor GC会清理年轻代的内存)
- 因为Java对象大多都具备朝生夕灭的特性,所以Minor GC 非常频繁,一般回收速度也比较快。这一定义既清晰又易于理解。
- Minor GC会引发STW,暂停其它用户线程,等垃圾回收结束,用户线程才恢复运行。
- 老年代GC(Major GC/Full GC)触发机制:
- 指发生在老年代的GC,对象从老年代消失时,我们说“Major GC”或“Full GC”发生了。
- 出现了Major GC,经常会伴随至少一次的Minor GC(但非绝对的,在Parallel Scavenge 收集器的收集策略里就直接进行Major GC的策略选择过程)。
- 也就是老年代空间不足时,会先尝试触发Minor GC。如果之后空间还不足,则触发Major GC
- Major GC的速度一般会比Minor GC慢10倍以上,STW的时间更长。
- 如果Major GC后,内存还不足,就报OOM
- Full GC触发机制
触发Full GC执行的情况有如下五种:- 1】 调用System.gc()时,系统建议执行Full GC,但是不必然执行。
- 2】老年代空间不足。
- 3】方法区空间不足。
- 4】通过Minor GC后进入老年代的平均大小大于老年代的可用内存。
- 5】有Eden区、Survivor Space0(From Space)区向Survivor Space1(To Space)区复制时,对象大小大于To Space可用内存,则把该对象转存到老年代,且老年代的可用内存小于该对象大小。
说明:Full GC是开发或调优中尽量要避免的。这样暂时时间会短一些。
堆空间分代思想
为什么需要把Java堆分代?不分代就不能正常工作了吗?
- 经研究,不同对象的生命周期不同。70%~99%的对象都是临时对象。
- 新生代:有Eden、两块大小相同的Survivor(又称为from/to,s0/s1)构成,to总为空。
- 老年代:存放新生代中经历多次GC仍然存活的对象。
- 其实不分代完全可以,分代的唯一理由就是优化GC性能。如果没有分代,那所有对象都在一块,就如同把一个学校的人都关在一个教室。GC的时候要能找到哪些对象没用,这样就会对堆的所有区域进行扫描。而很多时候对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储“朝生夕死”对象的区域进行回收,这样就会腾出很大的空间出来。
内存分配的策略
如果对象在Eden出生并经历过一次Minor GC后仍然存活,并且能被Survivor容纳的话,将被移动到Survivor空间中。并将对象年龄设为1.对象在Survivor区中每熬过一次Minor GC,年龄就增加1岁,当它的年龄增加到一定程度(默认为15岁,其实每个JVM、每个GC都有所不同)时,就会被晋升到老年代中。
对象晋升到老年代中的年龄阈值,可以通过选项:-XX:MaxTenuringThreshold来设置。
针对不同年龄段的对象分配原则如下所示:
- 优先分配到Eden
- 大对象直接分配到老年代
- 尽量避免程序中出现过多的大对象。
- 长期存活的对象分配到老年代
- 动态对象年龄判断
- 如果Survivor 区中相同年龄的所有对象大小的总和大于Survivor空间的一半,年龄大于或等于该年龄的对象可以直接进入老年代,无需等到MaxTenuringThreshold中要求的年龄。
- 空间分配担保
- -XX:HandlePromotionFailure
为对象分配内存:TLAB
为什么会有TLAB(Thread Local Allocation Buffer)?
-
堆区是线程共享区域,任何线程都可以访问到堆区中的共享数据
-
由于对象实例的创建在JVM中非常频繁,因此在并发环境下从堆区中划分内存空间是线程不安全的
-
为避免多个线程操作同一地址,需要使用枷锁等机制,进而影响分配速度。
TLAB是什么 -
从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分,JVM为每个线程分配一个私有缓存区域,它包含在Eden空间内。
-
多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题。同时还能够提升内存分配的吞吐量,因此我们可以将这种内存分配方式称之为快速分配策略。
TLAB再说明 -
尽管不是所有的对象实例都能够在TLAB中成功分配内存,但JVM确实是将TLAB作为内存分配的首选。
-
在程序中,开发人员可以通过选项"-XX:UserTLAB"设置是否开启TLAB空间
-
默认情况下,TLAB空间的内存非常小,仅占整个Eden空间的1%,当然我们也可以通过选项"-XX:TLABWasteTargetPercent"设置TLAB空间所占用Eden空间的百分比大小。
-
一旦对象在TLAB空间分配内存失败时,JVM就会尝试着通过使用加锁机制确保数据操作的原子性,从而直接在Eden空间中分配内存
### 小节堆空间的参数设置
-
-XX:+PrintFlagsInitial:查看所有的参数的默认值。
-
-XX:+PrintFlagsFinal:查看所有的参数的最终值(可能存在修改,不再是初始值)
-
-Xms:初始堆空间内存(默认为物理内存的1/64)
-
-Xmx:最大堆空间内存(默认为物理内存的1/4)
-
-Xmn:设置新生代的大小(初始值及最大值)
-
-XX:NewRatio:配置新生代与老年代在堆结构的占比。
-
-XX:SurvivorRatio:设置新生代中Eden和s0/s1空间的比例
-
-XX:MaxTenuringThreshold:设置新生代垃圾的最大年龄
-
-XX:+PrintGCDetails:输出详细的GC处理日志。
-
-XX:HandlePromotionFailure:是否设置空间分配担保
在发生Minor GC之前,虚拟机会检查老年代最大可用的连续空间是否大于新生代所有对象的总空间。- 如果大于,则此次Minor GC是安全的。
- 如果小于,则虚拟机会查看-XX:HandlePromotionFailure设置是否允许担保失败
- 如果HandlePromotionFailure=true,那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小。
- 如果大于,则尝试进行一次Minor GC,但这次Minor GC依然是有风险的。
- 如果小于,则改为进行一次Full GC。
- 如果HandlePromotionFailure=false,则改为进行一次Full GC
在JDK 6 update24之后,HandlePromotionFailure参数不在会影响到虚拟机的空间分配担保策略,观察OpenJDK中的源码变化,虽然源码中定义了HandlePromotionFailure参数,但是在代码中已经不会再使用它。JDK6 update24之后的规则会变为只要老年代的连续空间大于新生代对象总大小或者历次晋升的平均大小就会进行Minor GC,否则进行Full GC。
- 如果HandlePromotionFailure=true,那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小。
堆是分配对象存储的唯一选择吗?
逃逸分析的概述
在《深入理解Java虚拟机》中关于Java堆内存有这样一段描述:
对着JIT编译期的发展与逃逸分析技术逐渐成熟,栈上分配、标量替换优化技术将会导致一些微妙的变化,所有的对象都分配到堆上也渐渐变得不那么“绝对了”。
在Java虚拟机中,对象是在Java堆中分配内存的,这是一个普遍的常识。但是,有一种特殊的情况,那就是如果经过逃逸分析(Escape Analysis)后发现,一个对象并没有逃逸出方法的话,那么可能被优化成栈上分配。这样无需再堆上分配内存,也无须进行垃圾回收了。这也是最常见的堆外存储技术。
此外,前面提到的基于OpenJDK深度定制的TaoBaoVM,其中创新的GCIH(GC invisible heap)技术实现off-heap,将生命周期较长的Java对象从heap中移至heap外,并且GC不能管理GCIH内部的Java对象,以此达到降低GC的回收频率和提升GC的回收效率的目的。
-
如何将堆上的对象分配到栈,需要使用逃逸分析手段。
-
这是一种可以有效减少Java程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。
-
通过逃逸分析,Java Hots 编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。
-
逃逸分析的基本行为就是分析对象动态作用域:
- 当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸
- 当一个对象在方法中被定义后,它被外部方法所引用,则认为发生了逃逸。例如作为调用参数传递到其他地方中。
public void my_method(){ String s = new String(); }
没有发生逃逸的对象,则可以分配到栈上,随着方法执行的结束,栈空间就被移除。
public static StringBuffer createStringBuffer(String s1,String s2){ StringBuffer sb =new StringBuffer(); sb.append(s1); sb.append(s2); return sb; }
上述代码如果想要StringBuffer sb不逃逸出方法,可以这样写
public static String createString(String s1,String s2){ StringBuffer sb =new StringBuffer(); sb.append(s1); sb.append(s2); return sb.toString(); }
/**
* @program: JVMDemo
* @description: test
* @author: 郑朝文
* @create: 2021-08-24 10:18
**/
public class EscapeAnalysis {
public EscapeAnalysis obj;
/**
* 方法返回EscapeAnalysis对象,发生了逃逸
* @return
*/
public EscapeAnalysis getInstance(){
return obj== null ? new EscapeAnalysis():obj;
}
/**
* 为成员赋值,发生了逃逸
*/
public void setObj(){
this.obj=new EscapeAnalysis();
}
/**
* 对象的作用域仅在当前方法中有效,没有发生逃逸。
*/
public void useEscapeAnalysis(){
EscapeAnalysis e =new EscapeAnalysis();
}
/**
* 引用成员变量,发生了逃逸
*/
public void useEscapeAnalysis1(){
EscapeAnalysis e=getInstance();
}
}
参数设置:
- 在JDK 6u23版本之后,Hots中默认就已经开启了逃逸分析。
- 如果使用的是较早的版本,开发人员则可以通过:
- 选项“-XX:+DoEscapeAnalysis”显示的开启逃逸分析。
- 通过选项“-XX:+PrintEscapeAnalysis”查看逃逸分析的筛选结果。
结论
开发中能使用局部变量的,就不要再方法外定义。
代码优化
使用逃逸分析,编译期可以对代码做如下优化:
- 一、栈上分配。将堆分配转化为栈分配。如果一个对象在子程序中被分配,要使指向该对象的指针永远不会逃逸,对象可能是栈分配的候选,而不是堆分配。
- 二、同步省略。如果一个对象被发现只能从一个线程被访问到,那么对于这个对象的操作可以考虑不同步。
- 三、分离对象或变量替换。有的对象可能不需要作为一个连续的内存结构存在也可以被访问到,那么对象的部分(或全部)可以不存储在内存,而是存储在CPU寄存器中。
- JIT编译器在编译期间根据逃逸分析的结果,发现如果一个对象并没有逃逸出方法的话,就可能被优化成栈上分配。分配完成后,继续在调用栈内执行,最后线程结束,栈空间被回收,局部变量对象也被回收。这样就无须进行垃圾回收了。
栈上分配
- 常见的栈上分配的场景
- 在逃逸分析中,已经说明了。分别是给成员变量赋值、方法返回值、实例引用传递。
同步省略
- 线程同步的代价是相当高的,同步的后果是降低并发性和性能。
- 在动态编译同步块的时候,JIT编译器可以借助逃逸分析来判断同步块所使用的锁对象是否只能够被一个线程访问而没有被发布到其他线程。如果没有,那么JIT编译器在编译这个同步块的时候就会取消对这部分代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫同步省略,也叫锁消除。
如下代码
public void f(){
Object h = new Object();
synchronized (h){
System.out.println(h);
}
}
代码中的h这个对象进行枷锁,但是h对象的生命周期只在f()方法中,并不会被其他线程所访问到,所以在JIT编译阶段就会被优化掉。优化成:
public void f(){
Object h = new Object();
System.out.println(h);
}
标量替换
标量(Scalar)是指一个无法再被分解成更小的数据的数据。Java中的原始数据类型就是标量。
相对的,那些还可以分解的数据叫做聚合量(Aggregate),Java中的对象就是聚合量,因为他可以分解成其他聚合量和标量。
在JIT阶段,如果经过逃逸分析,发现一个对象不会被外界访问的话,那么经过JIT优化,就会把这个对象拆解成若干个其中包含的若干个 成员变量来代替。这个过程就是标量替换。
public class ScalarTest {
public static void main(String[] args) {
alloc();
}
private static void alloc() {
Point point = new Point(1, 2);
System.out.println("point.x=" + point.x + ";point.y=" + point.y);
}
}
class Point{
public int x;
public int y;
}
以上代码,经过标量替换后,就会变成
private static void alloc() {
int x = 1 ;
int y =2 ;
System.out.println("point.x=" + x + ";point.y=" + y);
}
可以看到,Pint这个聚合量经过逃逸分析后,发现他并没有逃逸,就被替换成两个聚合量。那么标量替换有什么好处呢?就是可以大大减少堆内存的占用。因为一旦不需要创建对象了,那么就不在需要分配堆内存了。
变量替换为线上分配提供了很好的基础。
变量替换的参数设置:
参数-XX:+EliminateAllocations:开启了标量替换(默认打开),允许对象打散在栈上。
代码举例
/**
* 标量替换测试
* -Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:-EliminateAllocations
*/
public class ScalarReplace {
public static class User {
public int id;
public String name;
}
public static void alloc() {
User u = new User(); //未发生逃逸
u.id = 5;
u.name = "www.baidu.com";
}
public static void main(String[] args) {
long start = System.currentTimeMillis();
for (int i = 0; i < 10000000; i++) {
alloc();
}
long end = System.currentTimeMillis();
System.out.println("花费的时间为: " + (end - start) + " ms");
}
}
没有使用标量替换
参数设置为:
-Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:-EliminateAllocations
[GC (Allocation Failure) 25600K->960K(98304K), 0.0012864 secs]
[GC (Allocation Failure) 26560K->976K(98304K), 0.0007606 secs]
[GC (Allocation Failure) 26576K->872K(98304K), 0.0006618 secs]
[GC (Allocation Failure) 26472K->856K(98304K), 0.0006887 secs]
[GC (Allocation Failure) 26456K->872K(98304K), 0.0006046 secs]
[GC (Allocation Failure) 26472K->904K(101376K), 0.0007515 secs]
[GC (Allocation Failure) 32648K->924K(100864K), 0.0007253 secs]
[GC (Allocation Failure) 32668K->1020K(100864K), 0.0003566 secs]
花费的时间为: 106 ms
开启标量替换
-Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:+EliminateAllocations
花费的时间为: 5 ms
没有GC,消耗时间为5ms
总结
上述代码在主函数中进行了1亿次alloc。调用进行对象创建,由于User对象实例需要占据约16字节的空间,因此累计分配空间达到将近1.5GB。如果堆空间小于这个值,就必然会发生GC。使用下面参数运行上述代码:
-server -Xmx100m -Xms100m -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:+EliminateAllocations
这里使用参数如下:
- 参数-server:启动server模式,因为在server模式下,才可以启用逃逸分析。
- 参数-XX:+DoEscapeAnalysis:启用逃逸分析
- 参数-Xmx10m:指定了堆空间最大为10MB
- 参数-XX:+PrintGC:将打印GC日志。
- 参数-XX:+PrintGC -XX:+EliminateAllocations:开启了变量替换(默认打开),允许对象打散分配在栈上,比如对象拥有id和name两个字段,那个这两个字段将会被视为两个独立的局部变量进行分配
逃逸分析并不成熟
- 关于逃逸分析的论文在1999年就已经发表了,但直到JDK1.6才有实现,而且这项技术到如今也并不是十分成熟的。
- 其根本原因就是无法保证逃逸分析的性能消耗一定能高于他的消耗。虽然经过逃逸分析可以做标量替换、栈上分配、和锁消除。但是逃逸分析自身也是需要进行一系列复杂的分析的,这其实也是一个相对耗时的过程。一个极端的例子,就是经过逃逸分析之后,发现没有一个对象是不逃逸的。那这个逃逸分析的过程就白白浪费掉了。
- 虽然这项技术并不十分成熟,但是它也是即时编译器优化技术中一个十分重要的手段。注意到有一些观点,认为通过逃逸分析,JVM会在栈上分配那些不会逃逸的对象,这在理论上是可行的,但是取决于JVM设计者的选择
- 据我所知,Oracle Hotspot JVM中并未这么做,这一点在逃逸分析相关的文档里已经说明,所以可以明确所有的对象实例都是创建在堆上。
- Oracle Hotspot JVM是通过标量替换实现逃逸分析的
- 目前很多书籍还是基于JDK7以前的版本,JDK已经发生了很大变化,intern字符串的缓存和静态变量曾经都被分配在永久代上,而永久代已经被元数据区取代。但是intern字符串缓存和静态变量并不是被转移到元数据区,而是直接在堆上分配,所以这一点同样符合前面一点的结论:对象实例都是分配在堆上。