Spark的两种核心Shuffle(HashShuffle与SortShuffle)的工作流程与源码分析(手把手看源码)

写在前面的话:本篇博客为原创,认真阅读需要比对spark 2.1.1的源码,预计阅读耗时30分钟,如果大家发现有问题或者是不懂的,欢迎讨论 欢迎关注公众号:后来X spark 2.1.1的源码包(有需要自取):关注公众号【后来X】,回复spark源码 在spark中说到shuffle,大家应该不陌生,因为有shuffle所以才把stage分为 ShuffleMapStage:前面的所有stage
相关文章
相关标签/搜索