平台搭建---Spark Submit提交应用程序及yarn

本部分来源,也能够到spark官网查看英文版。 spark-submit 是在spark安装目录中bin目录下的一个shell脚本文件,用于在集群中启动应用程序(如***.py脚本);对于spark支持的集群模式,spark-submit提交应用的时候有统一的接口,不用太多的设置。 使用spark-submit时,应用程序的jar包以及经过—jars选项包含的任意jar文件都会被自动传到集群中。h
相关文章
相关标签/搜索