spark中的参数设置

以前一直在使用spark，对于spark的参数设置了解过部分。最近当被同事问起时，感受本身又有点模糊。 好记性不如烂笔头。web spark-submit的参数设置 spark的运行模式有多种，这边就yarn提交的任务进行说明： 正经常使用到的参数以下：svg /bin/spark-submit –master yarn-cluster –num-executors 100 –executor-m

>>阅读原文<<