spark从入门到放弃二十七:Spark 性能优化(10)shuffle 性能优化

文章地址：http://www.haha174.top/article/details/251220 1 consolidation new SparkConf().set(“spark.shuffle.consolidateFiles”,”true”) 是否开启shuffle block file 的合并 默认false 没有开启consolidation 机制的时候，shuffle write

>>阅读原文<<