spark(13)-RDD的依赖关系(corse22)

1. RDD的依赖关系彻底解密 RDD依赖关系:窄依赖、宽依赖 窄依赖是指每个父RDD的Partition最多被一个子RDD的一个Partition所使用,例如map, filter等都会产生窄依赖 宽依赖是指一个父RDD的Partition被多个子RDD的Partition所使用,例如groupByKey, reduceByKey等操作都会产生宽依赖 总结: 如果父RDD的一个Partition
相关文章
相关标签/搜索