浅谈Spark On Yarn运行原理

一、两种运行模式 cluster模式:Driver程序在YARN中运行,应用的运行结果不能在客户端显示,所以运行那些将结果保存在外部存储介质(如HDFS、Redis、Mysql等)而非stdout输出的应用程序,客户端的终端显示仅是作为YARN的job简单运行状况。 client模式:Driver运行在Client上,应用程序运行结果会在客户端显示,所有适合运行结果有输出的应用程序(如spark-
相关文章
相关标签/搜索