yarn任务积压,资源仍然很多的问题解决

版本 hadoop3.x yarn3.x  这几周一直发生yarn任务积压的情况 积压情形如下 yarn只用了一点点资源 hadoop stream 任务全部积压 卡住不动 查看web ui 很多未申请到的资源 但是container 资源却只有8192mb 1c hadoop stream 提交的job都如此 查看详细情形 发现map结束之后 reduce 几乎没有进行 全部卡住  集群里其他的
相关文章
相关标签/搜索