spark 发展史，最近迎来 3.0 时代

注：以下图片均引用自2019年阿里云栖大会 Spark发展史 1 动态分区(Dynamic Partition Pruning) 在3.0以前，spark是不支持动态分区的，所谓动态分区就是针对分区表中多个表进行join的时候，在on后面的条件语句满足一定的要求后就会进行自动动态分区裁减优化，比如： 1SELECT t1.id,t2.pKey 2FROM t1 3JOIN t2 4ON t1.pK

>>阅读原文<<