Spark内核架构剖析(一)

整个Spark工作流程主要分为两部分: 一、创建SparkContext 1.客户端在提交spark应用的机器提交一个Applicaton程序。 2.通过spark-submit方式在该机器上创建一个Driver(jvm进程)。 3.Driver会执行我们自己编写的Application应用程序,并会在当前机器上初始化SparkContext。 4.SparkContext在初始化的时候,做的最重
相关文章
相关标签/搜索