13.3 Spark调优-JVM调优,shuffle调优, Reduce OOM

JVM调优： Executor JVM堆内存 分为三块 静态资源划分 (60%（RDD以及广播变量存储的位置）+20%（运行内存）+20%（reduce 聚合内存）)*90%+10%（JVM自身预留） = JVM堆内存 JVM的gc回收流程(属于运行内存中)： 在task中创建出来的对象首先往eden和survior1种存放，survior2是空闲的。当eden和survior1区域放满以后就会触

>>阅读原文<<