[Binospace] Sparrow(SOSP13)—一种加速短作业的调度方法

背景: 当前大规模数据分析框架的发展朝着两个趋势在变化: 1)任务执行时间更短。 2)更大的任务并行度。   因此,在当前分布式计算框架的调度系统中,需要有所改变,以满足如下的需求: 1)更快的任务调度效率,mill-seconds级别。 2)良好的容错,High Availability. 3)较高的吞吐率,High Throughput.   分析一下:什么原因会造成多任务的作业执行时间较长?
相关文章
相关标签/搜索