spark 提交任务方式(spark-yarn和spark-client)

yarn-cluster和yarn-client方式的区别: yarn-cluster的ApplicationMaster在任一一台NodeManager上启动,申请启动的Executor反向注册到AM所在的NodeManager, 而yarn-client方式的用ExecutorLancher替代AM,ExecutorLancher的作用很有限,它向RM申请一批container启动Execut
相关文章
相关标签/搜索