深入解析mapreduce中shuffle的工作原理

转发：https://blog.csdn.net/MrSaber/article/details/76934814   定义 shuffle：针对多个map任务的输出按照不同的分区（Partition）通过网络复制到不同的reduce任务节点上的过程。相应上图中红色框所圈的内容。 由图可见Shuffle过程横跨了map，reduce两端，所以为了方便讲解，我们在下面分为两个部分进行讲解：map端和

>>阅读原文<<