Spark 内存管理之UnifiedMemoryManager

概要 Spark 内存管理之StaticMemoryManager介绍了静态资源管理器,这篇研究另外一个内存管理器UnifiedMemoryManager,统一内存管理。UnifiedMemoryManager是Spark 1.6之后默认的内存管理器。 设计 为何引入统一资源管理器 静态资源管理器的storage、execution内存界限是固定的,那么不使用cache的情况下,storage这部
相关文章
相关标签/搜索