Spark性能优化二之Java虚拟机垃圾回收调优

GC对性能的影响： =调节excutor内存比例================= 调节executor内存比例，默认此参数值是0.6，降低调为0.5：使用new SparkConf().set(“spark.storage.memoryFraction”, “0.5”)即可，其实啊，根据经验来看，对于垃圾回收的调优，尽量就是说，调节executor内存的比例就可以了。因为jvm的调优是非常复杂和

>>阅读原文<<