3.2 RDD依赖与有向无环图DAG

一、 DAG定义 有向无环图(DAG):Directed Acycle graph,反应RDD之间的依赖关系; DAG每个节点代表啥?代表的一个RDD transformation: 1) 一个RDD生成两个RDD: RDD2 = RDD1.filter(xxxxx) RDD3 = RDD1.filter(yyyy) 是从RDD1到RDD2,RDD3这样的过程 2) Union是两个RDD合并成一
相关文章
相关标签/搜索