Spark job 的执行流程简介

Spark 应用程序在提交执行后，控制台会打印不少日志信息，这些信息看起来是杂乱无章的，可是却在必定程度上体现了一个被提交的 Spark job 在集群中是如何被调度执行的，这里将会向你们介绍一个典型的 Spark job 是如何被调度执行的。 咱们先来了解如下几个概念： DAG: 即 Directed Acyclic Graph，有向无环图，这是一个图论中的概念。若是一个有向图没法从某个顶点出发

>>阅读原文<<