Spark军师之DAGScheduler

       搬个凳子,捧着瓜子,让我们开始唠嗑。       首先,字面解读下“DAGScheduler”,可以理解为是一个DAG调度器,DAG又是啥呢?学术名叫:有向无环图。一个spark应用程序提交,spark引擎就是通过DAGScheduler将其切分成一个个stage。让我们先来看看DAGScheduler是在哪里起的作用的。经典图:     那这个DAGScheduler的职能到底是什
相关文章
相关标签/搜索