Spark Shuffle之SortShuffleWriter

概述 这篇文章是Spark Shuffle之Sort Shuffle的一部分,介绍SortShuffleWriter的实现,也就是Sort Shuffle。 SortShuffleWriter SortShuffleWriter的逻辑在write方法,查看代码 可以看出SortShuffleWriter使用ExternalSorter处理map端输出,因此,接下来的分析围绕ExternalSort
相关文章
相关标签/搜索