浅谈Yarn的资源调度

1. 初代MR的不足 (1.JobTracker要承担的任务过大,维护Job状态的同时又要维护job的task状态,造成过多资源消耗在Tarcker。2.在TaskTracker端会消耗大量的资源用于调度整合,容易出现OOM。3.把资源强制划分为M Slot / R Slot ) 1、扩展性差     2、可靠性低     3、资源利用率低     4、不支持多种计算框架 2. 首先我们要知道Ya
相关文章
相关标签/搜索