【1.1】spark on yarn 模式

1、基于yarn-client模式 (1)Hadoop集群启动,NodeManager(NM)向ResourceManager(RM)通信,汇报各自资源,RM掌握集群资源 (2)client上提交spark应用,同时启动Driver,client向RM申请资源,启动ApplicationMaster(AM) (3)RM在随机选择集群中的一个NM,来启动AM,AM向RM申请资源启动Executor,
相关文章
相关标签/搜索