Spark的RDD的依赖关系

RDD的依赖关系:宽依赖、窄依赖、Lineage(血统关系) 宽依赖:指的是多个子RDD的Partition会依赖同一个父RDD的Partition,会引起shuffle(可以理解为超生) 窄依赖:指的是每一个父RDD的Partition最多被子RDD的一个Partition使用(可以理解为独生子女)          Lineage:应用在整个过程中,RDD之间形成的产生关系,就叫做血统关系,R
相关文章
相关标签/搜索