Spark架构

Spark官网展示了如下的集群运行架构 其中涉及到以下概念: 概念 解释 Application 基于Spark的用户程序,包含了1个Driver Program和若干个Executor进程 Driver Program 运行Application的main()函数并且创建SparkContext,通常用SparkContext代表Driver Program;监听特定端口以保证和executor
相关文章
相关标签/搜索