Spark之RDD依赖关系及DAG逻辑视图

  RDD依赖关系为成两种:窄依赖(Narrow Dependency)、宽依赖(Shuffle Dependency)。窄依赖表示每一个父RDD中的Partition最多被子RDD的一个Partition所使用;宽依赖表示一个父RDD的Partition都会被多个子RDD的Partition所使用。html 1、窄依赖解析   RDD的窄依赖(Narrow Dependency)是RDD中最多见
相关文章
相关标签/搜索