Hadoop-MapReduce的工作原理

简介 MapReduce是工作于Hadoop之上的计算模型,可以将一个大型计算任务拆分为多个小的,可以在服务集群运行和计算的小任务,并将各个小任务计算结果汇总为一个计算结果;其过程主要分为Map阶段和Reduce阶段,MapReduce有1.0版本和2.0版本; MapReduceV1主要概念: JobTracker: 作用是接受任务,计算资源,分配资源与DataNode通信,同时还需要分解作业以
相关文章
相关标签/搜索