Spark面试:Spark on yarn 运行流程

一: Spark on YARN能让Spark计算模型在云梯YARN集群上运行,直接读取云梯上的数据,并充分享受云梯YARN集群丰富的计算资源。 二: 基于YARN的Spark作业首先由客户端生成作业信息,提交给ResourceManager, ResourceManager在某一 NodeManager汇报时把AppMaster分配给NodeManager, NodeManager启动 Spar
相关文章
相关标签/搜索