Spark执行流程

大体执行流程 1.driver执行main方法（懒执行），action算子触发触发job 2.根据宽窄依赖划分stage 3.每个stage会被整理成taskset(包含多个task)4.每个task分发到具体的Executor去执行   完整调度流程     1.当Driver启动的时候，初始化时会相应的创建DagScheduler、TaskScheduler 2.TaskScheduler初始

>>阅读原文<<