Spark性能优化指南学习（三）——spark数据倾斜调优

结合官网以及两篇高质量博客学习Spark性能调优，摘要几点加深理解 原文： Spark性能优化指南——基础篇 Spark性能优化指南——高级篇 官方文档 数据倾斜发生时的现象 绝大多数task执行得都非常快，但个别task执行极慢。比如，总共有1000个task，997个task都在1分钟之内执行完了，但是剩余两三个task却要一两个小时。这种情况很常见。 原本能够正常执行的Spark作业，某天突

>>阅读原文<<