Spark on YARN任务提交流程

Spark on YARN是spark运行在yarn上，其中有yarn-client和yarn-cluster两种模式，它们的区别在于Driver运行的结点位置。 yarn-client模式 yarn-client模式下的spark的Driver运行在客户端，适用于交互、调试，希望立即看到app的输出。 yarn-cluster模式 yarn-cluster模式下的spark的Driver运行在R

>>阅读原文<<