Spark调优 JVM调优

1. 为何要进行JVM调优?为何要进行垃圾回收? Spark是由Scala写的,而Java和Scala都是运行在JVM上的。而一个executor就是一个JVM进程。node 咱们会把executor分红两份,老年代和新生代,比例可能会不同。新生代会分红三份。web Spark做业开始运行,会不断的产生对象,对象会首先进入Eden区,而后若是Eden区存储满了,对象就会进入survivor1区,若
相关文章
相关标签/搜索