MR程序在yarn上的运行基本流程

1:客户端提交job到resourceManger 2:resourceManger创建job任务 返回工作路径给客户端 3:客户端接收到工作路径后会在HDFS上创建工作目录,初始化job 创建工作目录: 1读取默认的配置 自定义配置(conf.xml) 2计算要处理的数据(计算任务切片) 3上传jar包 4:客户端向resourceManger请求创建任务的容器(1core,1.5G) 5:re
相关文章
相关标签/搜索