Spark源码--Dependency

注:本文基于spark-2.4.4版本源码进行分析 首先从整体上看一下Dependency相关类的继承关系,有一个直观的印象:   然后从Dependency源码开始看。如下图:   Dependency是一个抽象类,类中的rdd成员是父RDD。 接着看NarrowDependency类:   NarrowDependency是一个抽象类。NarrowDependency覆盖了Dependency
相关文章
相关标签/搜索