161、Spark内核原理进阶之repartition算子内部实现原理

看图   repartition.png repartition算子,repartition算子=coalesce(true) map,附加了前缀,根据要重分区成几个分区,计算出前缀 shuffle->colesceRDD 去掉前缀,得到最终重分区好的RDD
相关文章
相关标签/搜索