YARN资源调度框架

一、产生的背景 1、MapReduce1.0存在的问题 ,架构如图所示: 1)单点故障:JobTracker只有一个,JobTracker挂了整个集群就没办法使用了; 2)一个人干的活太多:JobTracker负责接收来自各个JobTracker节点的RPC请求,压力会很大,限制了集群的扩展;随着节点规模增大之后,JobTracker就成为一个瓶颈; 2、资源利用率和运维成本 1)在没有YARN之
相关文章
相关标签/搜索