Spark on YARN-Cluster和YARN-Client的区别

YARN-Cluster和YARN-Client的区别 (1)SparkContext初始化不同,这也导致了Driver所在位置的不同,YarnCluster的Driver是在集群的某一台NM上,但是Yarn-Client就是在driver所在的机器上;  (2)而Driver会和Executors进行通信,这也导致了Yarn_cluster在提交App之后可以关闭Client,而Yarn-Cli
相关文章
相关标签/搜索