Spark部分：数据倾斜的优化【文字说明+图片】

 解决数据倾斜         1).数据倾斜             HDFS                 HDFS集群中某些节点数据非常多，某些节点数据非常少             Hive                 某张表中某个key对应非常多的数据，某些key对应少量的数据             Spark                 RDD中某个partition对应数

>>阅读原文<<