Spark性能调优-总结分享

一、Spark调优背景 目前Zeppelin已经上线一段时间，Spark做为底层SQL执行引擎，须要进行总体性能调优，来提升SQL查询效率。本文主要给出调优的结论，由于涉及参数不少，故没有很细粒度调优，但总体调优方向是能够得出的。node 环境：服务器600+，spark 2.0.2，Hadoop 2.6.0sql 二、调优结果 调优随机选取线上9条SQL，表横轴是调优测试项目，测试在集群空闲状况

>>阅读原文<<