Spark Shuffle模块——Suffle Read过程分析

在阅读本文以前,请先阅读Spark Sort Based Shuffle内存分析javascript Spark Shuffle Read调用栈以下: 1. org.apache.spark.rdd.ShuffledRDD#compute() 2. org.apache.spark.shuffle.ShuffleManager#getReader() 3. org.apache.spark.shu
相关文章
相关标签/搜索