Hadoop详解(十一):Yarn设计理念与基本架构

1. Yarn 产生背景 1.1 MRv1 的局限性 扩展性差:在MRV1中,jobtracker同时兼备了资源管理和作业控制两个功能,这成为系统的一个最大瓶颈,严重制约了hadoop集群扩展性。 资源利用率低:MRV1采用了基于槽位的资源分配模型,槽位是一种粗粒度的资源划分单位,通常一个任务不会用完槽位对应的资源,且其他任务也无法使用这些空闲资源 无法支持多种计算框架:随着互联网高速发展,map
相关文章
相关标签/搜索