Hadoop之MapReduce架构

一、MapReduce简介 MapReduce是一种分布式计算模型,是Google提出的,主要用于搜索领域,解决海量数据的计算问题。 MR有两个阶段组成:Map和Reduce,用户只需实现map()和reduce()两个函数,即可实现分布式计算。 MapReduce计算模型主要由三个阶段构成:Map、Shuffle(不需要我们操作,框架已实现)、Reduce。Map是映射,负责数据的过滤分类,将原
相关文章
相关标签/搜索