spark任务调度FIFO和FAIR的详解

今天咱们主要来分析一下spark的任务调度,Spark中的调度模式主要有两种：FIFO和FAIR。默认状况下Spark的调度模式是FIFO（先进先出），谁先提交谁先执行，后面的任务须要等待前面的任务执行。而FAIR（公平调度）模式支持在调度池中为任务进行分组，不一样的调度池权重不一样，任务能够按照权重来决定执行顺序。spark的调度模式能够经过spark.scheduler.mode进行设置。ja

>>阅读原文<<