spark on yarn cluster 与 client 模式的区别

Spark on yarn有分为两种模式yarn-cluster和yarn-client   Spark支持可插拔的集群管理模式(Standalone、Mesos以及YARN ),集群管理负责启动executor进程,编写Spark application 的人根本不需要知道Spark用的是什么集群管理。Spark支持的三种集群模式,这三种集群模式都由两个组件组成:master和slave。Mas
相关文章
相关标签/搜索