走向云计算之MapReduce原理和运行流程详解

1、概述 MapReduce的设计理念源自于Google的MapReduce论文(发表于2004年12月),Hadoop MapReduce是Google MapReduce克隆版。MapReduce采用”分而治之”的思想,把对大规模数据集的操做,分发给一个主节点管理下的各个分节点共同完成,而后经过整合各个节点的中间结果,获得最终结果。简单地说,MapReduce就是”任务的分解与结果的汇总”。j
相关文章
相关标签/搜索