map/reduce之间的shuffle，partition，combiner过程的详解

Shuffle的本意是洗牌、混乱的意思，相似于java中的Collections.shuffle(List)方法，它会随机地打乱参数list里的元素顺序。MapReduce中的Shuffle过程。所谓Shuffle过程能够大体的理解成：怎样把map task的输出结果有效地传送到reduce输入端。也能够这样理解， Shuffle描述着数据从map task输出到reduce task输入的这段过

>>阅读原文<<