分布式并行计算框架MapReduce

理解MapReduce思想 需求:有一个五层的图书馆,需要获取图书馆中一共有多少本书。 只有一个人时,是能一本一本的数!工作量巨大,耗时较长。 分配五个人由你支配。此时你怎么支配? 五个人,每个人数一层的书量,最终将五个人的量汇总求和,就是图书馆中最终书的数量。   MapReduce的思想核心是“分而治之,先分后合”。即将一个大的、复杂的工作或任务,拆分成多个小的任务,并行处理,最终进行合并。适
相关文章
相关标签/搜索