调度器学习(一)

FIFO 早期的Hadoop使用FIFO(先进先出)调度算法,典型情况下,每个作业都会使用整个集群,因此其他作业必须等待。问题是有些生产作业需要及时完成,同时还要保证正在进行较小临时查询的用户能够在合理时间内得到返回结果。 后来,设置了作业优先级的功能,可以通过设置mapred.job.priority属性或者JobClient的setJobPriority()方法来设置优先级。在作业调度器在选择
相关文章
相关标签/搜索