spark运行方式及其经常使用参数

本文将介绍spark的几种运行方式，及经常使用的参数java yarn cluster模式 例行任务通常会采用这种方式运行web 指定固定的executor数 做业经常使用的参数都在其中指定了，后面的运行脚本会省略shell spark-submit \ --master yarn-cluster \ --deploy-mode cluster \ #集群运行模式 --na

>>阅读原文<<