Hadoop架构介绍——MapReduce的体系结构

MapReduce的体系结构: -分布式编程架构算法 -以数据为中心,更看重吞吐率编程 -分而治之(把对大规模数据集的操做,分发给一个主节点管理下的各个分节点共同完成,而后整合各个节点的中间结果获得最终的输出)架构 -Map把一个任务分解成多个子任务分布式 -Reduce将分解后的多任务分别处理,并将结果汇总为最终的结果函数 应用举例:清点图书馆藏书、统计单词的出现次数、混合辣椒酱的制做等等。oo
相关文章
相关标签/搜索