MapReduce的执行流程

一个MapReduce的做业执行流程是:1)代码编写;2)做业配置;3)做业提交;4)Map任务的分配和执行;4)处理中间结果;5)Reduce任务的分配与执行;6)做业完成。具体如图1-1所示。下面以一个简单的单词计数例子对各个步骤作一个详细的介绍。 java 1代码编写及配置 代码编写及配置主要是在客户端进行。web 1)代码编写主要是编写咱们须要的map函数和Reduce函数。bash ma
相关文章
相关标签/搜索