MapReduce的基本工作原理

MapReduce的基本模型和处理思想: 三个层面上的基本构思  1.如果对付大数据处理:分而治之     对相互之间不具有计算依赖关系的大数据,实现并行最自然的办法就是采取分而治之的策略。   2.上升到抽象模型:Mapper与Reduce     MPI等并行计算方法缺少高层并行编程模型,程序员需要自行指定存储,计算,分发等任务,为了克服这一缺陷,MapReduce借鉴了Lisp函数式语言中的
相关文章
相关标签/搜索