mapreduce工作原理

  MapReduce模型主要包含Mapper类和Reducer类两个抽象类。Mapper类主要负责对数据的分析处理,最终转化为key-value数据对;Reducer类主要获取key-value数据对,然后处理统计,得到结果。MapReduce实现了存储的均衡,但没有实现计算的均衡。 一. MapReduce框架组成 MapReduce主要包括JobClient、JobTracker、TaskT
相关文章
相关标签/搜索