MapReduce执行流程

MapReduce的大致流程是这样的,如图所示: 由图片能够看到mapreduce执行下来主要包含这样几个步骤 1.首先对输入数据源进行切片 2.master调度worker执行map任务 3.worker读取输入源片断 4.worker执行map任务,将任务输出保存在本地 5.master调度worker执行reduce任务,reduce worker读取map任务的输出文件 6.执行reduc
相关文章
相关标签/搜索