Hadoop知识学习(3)-mapreduce

MapReduce是一种分布式计算模型,用以进行大数据量的计算。其中Map,对数据集上的独立元素进行指定的操作,生成键-值对形式中间结果。Reduce,则对中间结果中相同“键”的所有“值”进行规约,以得到最终结果。MapReduce这样的功能划分,非常适合在大量计算机组成的分布式并行环境里进行数据处理。 JobTracker:Master节点,只有一个,管理所有作业,作业/任务的监控、错误处理等;
相关文章
相关标签/搜索