Mapreduce框架-reduceTask工作原理

ReduceTask的工作原理 1.reduceTask获取map阶段的输出-copy阶段 两点说明： （1）map任务和reduce任务不一定在同一台机器上。 （2）map任务和reduce任务不是只有一个。可能有多个map任务和多个reduce任务同时执行。 1.reduce需要通过内部通信将map任务的输出拷贝到reduce。 2.需要将所有的map任务的输出拷贝到不同的reduce。一个r

>>阅读原文<<