Spark之内核架构剖析

之前在 Spark学习笔记之调度 就已经大致描述了应用程序的调度。现在就再详细的剖析下这个过程。 如图所示:Application 通过 submit 被提交到机器上后,该节点会启动一个 Driver 进程。 Driver 来开始执行 Application 应用程序,首先会初始化 SparkContext,实例化SparkContext; SparkContext 实例化后,就会构建 DAGSc
相关文章
相关标签/搜索