PySpark ---- Sparkcontext编程入口

SparkContext是PySpark的编程入口,做业的提交,任务的分发,应用的注册都会在SparkContext中进行。一个SparkContext实例表明着和Spark的一个链接,只有创建了链接才能够把做业提交到集群中去。实例化了SparkContext以后才能建立RDD和Broadcast广播变量。node 1.建立方式 1.1 经过SparkSession获取SparkContext对象
相关文章
相关标签/搜索