【Spark四十六】Spark RDD物理执行图与Stage

理解记忆如下要点： 1. 划分Stage的方法是从后向前，遇到 shuffle Dependency就断开，如果是Narrow Dependency就划入当前的Stage。所以，ShuffledRDD通常是一个Stage的开头(Stage的开头未必是 ShuffledRDD，也有可能是数据源转换而来的RDD)。所以上面一共3个Stage。需要注意的是，shuffle的结果未必成为 Shuffled

>>阅读原文<<