Spark性能调优2-总结分享

2019独角兽企业重金招聘Python工程师标准>>> 1、Spark调优背景 目前Zeppelin已经上线一段时间,Spark作为底层SQL执行引擎,需要进行整体性能调优,来提高SQL查询效率。本文主要给出调优的结论,因为涉及参数很多,故没有很细粒度调优,但整体调优方向是可以得出的。 环境:服务器600+,spark 2.0.2,hadoop 2.6.0 2、调优结果 调优随机选取线上9条SQL
相关文章
相关标签/搜索