Spark-Submit 常用命令

一个Spark任务好不容易开发完成了，终于要上集群跑了，就差万里长征的最后一步了：通过Spark-Submit命令上集群运行，这时候需要做哪些常规与优化工作呢。 这里贴一个常用的SparkSubmit提交脚本 脚本名称：submitHelperLabel.sh 脚本内容： spark-submit \ --master yarn \ --name helper-label-count \ --de

>>阅读原文<<