Spark

术语解释 Application: 基于Spark用户,包含了Driver程序 在spark中,你启动了一个spark shell 就相当于一个application,以什么为基准呢,就是说,一个sparkContext,只要你有这个类,那么就说你有一个Application,但是在Spark shell中已经给你创建好了sc, Driver: 运行main函数并且新建SparkContext c
相关文章
相关标签/搜索