Spark内存管理(一)——静态内存管理模型

Spark静态内存管理模型 一 .简介 spark从1.6开始引入了动态内存管理模式，即执行内存和存储内存之间可以互相抢占。所以从spark 1.6以后，spark提供两种内存分配模式，即：静态内存管理和动态内存管理。 该篇文章主要针对spark静态内存管理进行了分析与说明 二 . 模型总览 从下图可以清晰的看出每个executor的内存分配: 上图代表了spark中的每个worker(execu

>>阅读原文<<