RDD

RDD计算方式 RDD的宽窄依赖   窄依赖 (narrowdependencies) 和宽依赖 (widedependencies) 。 窄依赖是指 父 RDD 的每个分区都只被子 RDD 的一个分区所使用 。 宽依赖就是指父 RDD 的分区（父RDD被切分并分发了）被多个子 RDD 的分区所依赖。 这种划分有两个用处： 首先，窄依赖支持在一个节点上管道化执行。例如基于一对一的关系，可以在 fi

>>阅读原文<<