Spark内存管理

Spark内存管理 1.1.堆内内存和堆外内存 1.1.1.堆内内存(on-heap) 在JVM堆上分配的内存,在JVM垃圾回收GC范围内 ①:Driver堆内存:通过–driver-memory 或者spark.driver.memory指定,默认大小1G; ②:Executor堆内存:通过–executor-memory 或者spark.executor.memory指定,默认大小1G 在提交
相关文章
相关标签/搜索