Spark基于Yarn的两种提交模式

①sparn on yarn-cluster模式 ②sparn on yarn-client提交模式 一般,sparn on yarn-client在测试的时候使用,dirver运行在客户端,负责调度application。yarn-client模式下,driver在本地启动,全权负责所有任务调度,即在yarn集群上与多个executor通信(task启动消息、task统计消息、task运行状态、
相关文章
相关标签/搜索