Hadoop学习回顾之MapReduce

MapReduce是批处理的计算框架,分治思想非常朴素,但是实现确实要注意很多细节,同时编程框架个人觉得WordCount部分与storm有相似之处,可以类比学习。 MapReduce过程 一个MapReduce作业经过了input、map、combine、reduce、output五个阶段,其中combine不一定发生。 如下图,在MRv1的架构中,MR job作业,是用户提交的最小单位,Map
相关文章
相关标签/搜索