一个例子让你了解MapReduce中shuffle的过程

Shuffle 目录   一 .Shuffle基本概念   二 .MapReduce 过程为什么需要shuffle过程呢?   三 .Combiner     1 Combiner对系统的优化   四 .Partitioner     1 用数据分区解决数据相关性问题     2 Partitioner主要作用   五 .Shuffle过程的期望   六 .Sort   七 .Merge     
相关文章
相关标签/搜索