Mapreduce框架-reduceTask工做原理

ReduceTask的工做原理 1.reduceTask获取map阶段的输出-copy阶段 两点说明: (1)map任务和reduce任务不必定在同一台机器上。 (2)map任务和reduce任务不是只有一个。可能有多个map任务和多个reduce任务同时执行。程序员 1.reduce须要经过内部通讯将map任务的输出拷贝到reduce。 2.须要将全部的map任务的输出拷贝到不一样的reduce
相关文章
相关标签/搜索