Spark 常规性能调优

  1. 常规性能调优 一：最优资源配置 Spark性能调优的第一步，就是为任务分配更多的资源，在必定范围内，增长资源的分配与性能的提高是成正比的，实现了最优的资源配置后，在此基础上再考虑进行后面论述的性能调优策略。  --driver-memory 配置Driver内存（影响不大） 内存大小影响不大html 资源的分配在使用脚本提交Spark任务时进行指定，标准的Spark任务提交脚本所示：ja

>>阅读原文<<