Spark源码解析:TaskSetManager 任务推断执行源码解析。

1、TaskSetManager的概述 TaskSetManager也实现了Schedulable特质,并参与到调度池的调度中,TaskSetManager对TaskSet进行管理,包括任务推断、Task本地性、并对Task进行资源分配。TaskSchedulerImpl依赖于TaskSetManager. 2、推断执行 在Hadoop2.x.x版本中,当一个应用向Yarn集群提交作业后,此作业的
相关文章
相关标签/搜索