spark学习(五):shuffle以及内存管理机制

目录 1. shuffle详解 1.1 那么到底什么时shufffle? reduceByKey的含义? 问题: 如何聚合? 1.2 Shuffle分为shuffle和sortShuffle 1.2.1 shuffle普通机制 1.2.2 shuffle合并机制 1.2.3 SortShuffle普通运行机制 1.3 shuffle文件寻址 1.4 shuffle调优 2. spark的内存管理机
相关文章
相关标签/搜索