Spark架构原理

一、Spark运行架构 1.1 术语定义 Application:Spark Application的概念和Hadoop MapReduce中的相似,指的是用户编写的Spark应用程序,包含了一个Driver 功能的代码和分布在集群中多个节点上运行的Executor代码; Driver:Spark中的Driver即运行上述Application的main()函数而且建立SparkContext,其
相关文章
相关标签/搜索