[学习笔记]Hadoop核心之初始MapReduce

MapReduce原理 MapReduce采用的是分而治之的思想,将一个大的任务分成多个小的子任务(称之为map),并行执行后,合并结果(称之为reduce)。 假如现在有一千副扑克牌没有大小王,然后将他们混在一起,其中有一副牌少了一张,所以总共只有51999张牌,现在我们要找出来缺少的是哪张牌。 我们可以这样来做: 首先,把牌大致分一下 牌很多,可以随机的分下,比如现在将其分成五份 然后由五个人
相关文章
相关标签/搜索