Spark 核心概念:Master、Worker、Driver Program、Executor、RDDs

一、Master          Spark 特有资源调度系统的 Leader,掌管着整个集群的资源信息(Standalone模式),类似于 Yarn 集群中的ResourceManager。 主要功能: 监听 Worker,看集群中的 Worker 是否正常工作; 管理 Worker、Application(接收 Worker 的注册并管理所有的 Worker;接收 Client 提交的 Ap
相关文章
相关标签/搜索