阿里云Spark Shuffle的优化

转自：大数据技术与架构 本次分享者：辰石，来自阿里巴巴计算平台事业部EMR团队技术专家，目前从事大数据存储以及Spark相关方面的工作。 Spark Shuffle介绍 Smart Shuffle设计 性能分析 Spark Shuffle流程 Spark 0.8及以前 Hash Based Shuffle  Spark 0.8.1 为Hash Based Shuffle引入File Consoli

>>阅读原文<<