最详细的Spark内存管理

spark 各版本的内存参数:   一.Spark 1.6内存管理: spark 1.6之前 使用StaticMemoryManager,叫legacy模式,默认是关闭的。 spark1.6开始,使用UnifiedMemoryManager。 1.6开始的内存结构:   由上图知道,内存由三部分组成。 1.Reserved Memory ,系统保留的内存,是硬编码写死的,spark 1.6 这个值
相关文章
相关标签/搜索