spark2原理分析-Job执行框架概述

概述 本文描述了Spark2的job的实现框架，并对其各个组成部分进行了介绍。 spark的Job介绍 从前面的文章中我们知道：一般来说Spark RDD的转换函数(transformation)不会执行任何动作，而当Spark在执行RDD的action函数时，Spark调度程序(scheduler)会构建执行图(graph)并发起一个Spark作业(Job)。 Job由很多的Stage构成，这些

>>阅读原文<<