《深刻理解Spark》之Spark的总体运行流程

spark做为流行的计算框架,下面是其运行流程图,以Cluster模式为例 Spark运行流程图,author:lyzx_hero 一、经过spark-submit的方式提交做业,此时应用程序向master发送请求启动Driver程序     Driver程序负责对资源和任务的调度 二、Master在资源充足的Worker上启动一个Driver进程     这里须要注意是Master找到资源充足的
相关文章
相关标签/搜索