spark学习之spark基本架构和运行模式(初初级)

一 spark的基本架构 Cluster Manager:用来管理资源,随着资源管理者身份的不同而改变,在standalone 模式中即为Master主节点,控制整个集群,监控worker。在YARN模式中为资源管理器 Worker节点:从节点,负责控制计算节点,启动Executor或者Driver。 Driver: 程序入口,负责申请资源和后续整个application执行的管理 Executo
相关文章
相关标签/搜索