Spark运行机制之DAG原理

学习过程中，看过很多讲作业提交和任务调度的原理，包括中英文版本，知道个大概，但有些细的东西总感觉不清晰， 比如drvier程序具体是什么？ 一个application有多个job，每个action动作会触发一个job，为什么？ 一个job内有多个stage，如何划分？stage有不同类型么？ 一个stage内的task数量如何确定？ task具体是什么？ 什么是shuffle map任务？shuf

>>阅读原文<<