Spark-----RDD的依赖关系(宽依赖和窄依赖)

目录 查看RDD的血缘关系 查看RDD的依赖关系 窄依赖 宽依赖 查看RDD的血缘关系 查看RDD的依赖关系 窄依赖 窄依赖相当于OneToOne 如果 B RDD 是由 A RDD 计算得到的, 则 B RDD 就是 Child RDD, A RDD 就是 parent RDD. 如果依赖关系在设计的时候就可以确定, 而不需要考虑父 RDD 分区中的记录, 并且如果父 RDD 中的每个分区最多只
相关文章
相关标签/搜索