Spark 3.0 AQE Adaptive Query Execution详解

在Spark 3.0中，AQE框架具有以下三个功能： Dynamically coalescing shuffle partitions （动态整合shuffle partitions 数量） Dynamically switching join strategies  （ 动态切换连接策略 ） Dynamically optimizing skew joins  （ 动态优化倾斜连接 ） 以下各

>>阅读原文<<