hadoop集群老的资源管理Mrv1与Yarn资源管理器的工作流程和对比

MRv1缺点 1、JobTracker容易存在单点故障 2、JobTracker负担重,既要负责资源管理,又要进行作业调度;当需处理太多任务时,会造成过多的资源消耗。 3、当mapreduce job非常多的时候,会造成很大的内存开销,在  TaskTracker端,以mapreduce task的数目作为资源的表示过于简单,没有考虑到cpu以及内存的占用情况,如果两个大内存消耗的task被调度到
相关文章
相关标签/搜索