Spark内核架构

为了更加清晰的知道Spark作业是怎么运行的,有必要知道Spark的内核运行机制,我们以Standalone模式为例,剖析Spark的内核运行架构,内核架构图如下所示:    我们首先在一台机器上提交Spark Application,通过Spark-submit脚本进行提交,提交Spark Application的这台机器会启动一个Driver进程,Driver进程启动之后,会执行我们的Spar
相关文章
相关标签/搜索