spark job提交过程

spark job提交过程 2016年11月09日 17:28:35 阅读数:3203 Driver的任务提交过程 1、Driver程序的代码运行到action操作,触发了SparkContext的runJob方法。  2、SparkContext调用DAGScheduler的runJob函数。  3、DAGScheduler把Job划分stage,然后把stage转化为相应的Tasks,把Tas
相关文章
相关标签/搜索