spark性能调优

park性能调优的第一步,就是为任务分配更多的资源,在一定范围内,增加资源的分配与性能的提升是成正比的,实现了最优的资源配置后,在此基础上再考虑进行后面论述的性能调优策略。 指定脚本: /usr/opt/modules/spark/bin/spark-submit –class com.atguigu.spark.Analysis –num-executors 80 –driver-memory
相关文章
相关标签/搜索