MapReduce程序运行流程详解

一、MapReduce整体运行流程 流程示意图如下: (1)在MapReduce程序读取文件的输入目录上存放相应的文件。 (2)客户端程序在submit()方法执行前,获取待处理的数据信息,然后根据集群中参数的配置形成一个任务分配规划。 (3)客户端提交job.split、jar包、job.xml等文件给yarn,yarn中的resourcemanager启动MRAppMaster。 (4)MRA
相关文章
相关标签/搜索