基于YARN的mapreduce作业执行流程详解

相对于MapReduce1系统,YARN将jobtracker的职能划分为多个独立个体,从而改善经典MapReduce在扩展时面临的瓶颈。 标基于YARN的mapreduce作业执行流程题 YARN中的实体: 1. 客户端:提交MapReduce作业; 2. 资源管理器:协调集群上计算资源的分配。 3. 节点管理器:负责启动和监视集群中机器上的计算容器(container)。 4. 应用管理器(M
相关文章
相关标签/搜索