YARN架构详解

MapReduce v1的不足 Jobtraker受内存限制,导致扩展性受限。因为其需要存储每个作业的信息。另一方面,其采用粗粒度的锁导致心跳时间边长。 中心化架构的通病,一旦Jobtraker崩溃,会导致整个集群崩溃。 以mapreduce为中心,MapReduce不支持其他的编程模型,如机器学习,图算法 tasktraker的Map 槽和Reduce槽是固定的,不是动态分配的资源。 Yarn(
相关文章
相关标签/搜索