stage,task和job的区别与划分方式

Application 用户构建在 Spark 上的程序。由集群上的一个 driver 程序和多个 executor 组成。node Worker node 任何在集群中能够运行应用代码的节点。递归 Executor 一个为了在 worker 节点上的应用而启动的进程,它运行 task 而且将数据保持在内存中或者硬盘存储。每一个应用有它本身的 Executor。生命周期 Job:一个由多个任务组成
相关文章
相关标签/搜索