SPARK中shuffle的机制和原理分析

目录 概述 一 HashShuffle机制 1.1 HashShuffle概述 1.2 没有优化之前的HashShuffle机制​ 1.3 优化后的HashShuffle 二 Sort-Based Shuffle 2.1 Sort-Based Shuffle概述 2.2 Sorted-Based Shuffle介绍 概述 Shuffle就是对数据进行重组,由于分布式计算的特性和要求,在实现细节上更
相关文章
相关标签/搜索