大数据处理 — 浅析MapReduce之shuffle

浅析MapReduce -> shuffle shuffle的意思就是洗牌，它是MapReduce的核心，也是被称为奇迹发生的地方，因为MapReduce玩的就是洗数据，然后让数据出现在该出现的位置. 官方描述的shuffle过程，我们不太可能明白shuffle的过程，因为它与事实相差挺多的，细节也是错乱的. 我们现在这样理解就可以了， shuffle 描述着数据从map task输出到reduc

>>阅读原文<<