MapReduce 运行原理---再聊MapReduce 的 Map ，Reduce 以及shuffle 过程

官网使用了三张图来描述shuffle 过程 ，Map 和 reduce 是我们自己写的程序，所以没有写进这三个图里面,今天主要围绕这三张图我们做一个简单的说明和复习 ： 第一张图，从整体上把握流程 上图提供的是整个流程的一部分，全部流程应该是有 4 个  Map  ，3 个 Reduce ，这里只有一个map 一个  reduce 第一个问题 ： partition 什么时候做 ？ partiti

>>阅读原文<<