spark学习笔记(二)----运行模式、spark-submit

spark运行模式 1、application program组成 Job:包含多个Task 组成的并行计算,跟Spark action对应 Stage:Job 的调度单位,对应于TaskSet Taskset:一组关联的、相互之间没有shuffle 依赖关系的任务组成的任务集 Task:被送到某个executor 上的工作单元 2、运行流程(以standalone为例) 程序提交,spark d
相关文章
相关标签/搜索