spark 发展史,最近迎来 3.0 时代

本文的目的主要是介绍11月8日发布的Apache Spark3.0预览版所增加的一些功能和特性,希望能让大家对这些新特性有一个基础的了解,以便后面能够更快的上手和适应新版本。 注:以下图片均引用自2019年阿里云栖大会 Spark发展史 1 动态分区(Dynamic Partition Pruning) 在3.0以前,spark是不支持动态分区的,所谓动态分区就是针对分区表中多个表进行join的时
相关文章
相关标签/搜索