spark运行流程

运行架构 Spark应用程序有多种运行模式。SparkContext和Executor这两部分的核心代码实现在各种运行模式中都是公用的,在这两部分之上,根据运行部署模式(例如:Local[N]、Yarn cluster等)的不同,有不同的调度模块以及对应的适配代码。 Spark基本工作流程   以SparkContext为程序运行的总入口,在SparkContext的初始化过程中,Spark会分别
相关文章
相关标签/搜索