spark 源码 ---1-SparkContext-初始化

SparkContext -- v 2.2 Spark的对外接口,代表了与spark 集群交互的连接,负责向调用这提供Spark的各种功能 主要功能: 在集群上,创建RDD,累加器,广播变量等 driver 和 executor都会创建 sparkContext   初始化过程 -- driver 前置条件SparkConf设置: spark.master 必须设置 本地模式为 local[*]
相关文章
相关标签/搜索