spark 数据倾斜调优

数据倾斜应该算是一个比较麻烦的问题，笔者也是刚刚开始学习相关的调优，将看到的比较全面、清晰的几种解决方案整合了一下，并加上了一些理解与心得，供参考！ 首先，需要对spark执行计划有一定的基础与理解，区分若干的stage进行的不同的操作，并且将数据倾斜问题定位到某个stage是非常关键的，之后就是根据不同业务场景进行相应的处理与调优了。 以下内容部分摘自：https://www.iteblog.c

>>阅读原文<<