spark性能优化(数据倾斜调优，shuffle调优)

前言 继基础篇讲解了每一个Spark开发人员都必须熟知的开发调优与资源调优以后，本文做为《Spark性能优化指南》的高级篇，将深刻分析数据倾斜调优与shuffle调优，以解决更加棘手的性能问题。html 数据倾斜调优 调优概述 有的时候，咱们可能会遇到大数据计算中一个最棘手的问题——数据倾斜，此时Spark做业的性能会比指望差不少。数据倾斜调优，就是使用各类技术方案解决不一样类型的数据倾斜问题，以

>>阅读原文<<