关于hadoop mapreduce的job cleanup阶段

        近段时间发现好多分析的mr做业延迟1个小时到2个小时,其实那个做业平时可能会只须要20分钟。分析做业状态发现延迟是在job的cleanup阶段。java        近段时间因为用户的增加及数据的持续飙升,集群做业愈来愈多,每一个做业占用槽位也不断增加,致使集群槽位紧张,因此集群出现排队现象原本运算正常,可是若是整个做业setup、map、reduce都处理完了,仅剩cleanu
相关文章
相关标签/搜索