SparkShuffle的文件寻址

文章目录 Shuffle 文件寻址 进程 1) MapOutputTracker 2) BlockManager 文件寻址图 Shuffle 文件寻址流程 Shuffle 文件寻址 进程 1) MapOutputTracker MapOutputTracker是Spark架构中的一个模块，是一个主从架构。管理磁盘小文件的地址 MapOutputTrackerMaster 是主对象，存在于 Driv

>>阅读原文<<