Spark-任务调度

目录 流程 流程    1.Soark中,咱们写的应用程序都是一个个RDD对象组成的。能够根据代码画出来一个DAG有向无环图,将DAG有向无环图交给DAG Scheduler;    2.DAG Scheduler根据款窄依赖将DAG有有向无环图切割成一个个的stage,将切割出来的stage封装成另外一个对象TaskSet,TaskSet就是一个个的stage。而后DAG Scheduler将一
相关文章
相关标签/搜索