Spark-01

一、必须知道         SparkContext         sparkContext在Spark应用程序的执行过程中起着主导作用,它负责与程序和spark集群进行交互,包括申请集群资源、创建RDD、accumulators及广播变量等。sparkContext与集群资源管理器、work节点交互图如下:     sparkContext构建的顶级三大核心:DAGScheduler,Tas
相关文章
相关标签/搜索