Task运行过程分析1

一、Task运行过程概述 在MapReduce计算框架中,一个应用程序被划分红Map和Reduce两个计算阶段,它们分别由一个或者多个Map Task和Reduce Task组成。其中,每一个Map Task处理输入数据集合中的一片数据(InputSplit),并将产生的若干个数据片断写到本地磁盘上,而Reduce Task则从每一个Map Task上远程拷贝相应的数据片断,经分组汇集和归约后,将
相关文章
相关标签/搜索