yarn资源管理优化

集群环境: chd5-2.5.2 我们集群使用的是FailScheduler,如果队列参数设置不合理,会直接影响到任务执行的快慢。 队列设置不合理 举例如下: 现状:该队里minshare设置的过小,同时起的任务太多 导致的问题:该队列中平均每个任务分的资源比较少,任务跑的特别慢,同时,任务之间会相互抢占container 比如下面的任务,跑了30多个小时,还没跑完 看一下任务详情: 1,当前只分
相关文章
相关标签/搜索