Spark(十四)Spark Core 调优之Spark内存模型

文章目录 1、概述 2、堆内和堆外内存规划 2.1 堆内内存 2.2 堆外内存 2.3 内存管理接口 3、内存空间分配 3.1 静态内存管理 3.2 统一内存管理 4、存储内存管理 4.1 RDD 的持久化机制 4.2 RDD 缓存的过程 4.3 淘汰和落盘 5、 执行内存管理 5.1 多任务间内存分配 5.2 Shuffle 的内存占用 1、概述 Spark 做为一个基于内存的分布式计算引擎,其
相关文章
相关标签/搜索