宽依赖和窄依赖

窄依赖：一个RDD，对它的父RDD，只有简单的一对一的依赖关系。也就是说，每个RDD的partition，仅仅依赖于父RDD中的一个partition。父RDD和子RDD的partition之间的关系是一对一的。 宽依赖：本质就是Shuffle，就是每一个父RDD的partition中的数据，都可能会传输一部分，到下一个RDD的每个partition中。此时就会出现，父RDD和子RDD的parti

>>阅读原文<<