Spark分区详解！DT大数据梦工厂王家林老师亲自讲解！

Spark分区详解！DT大数据梦工厂王家林老师亲自讲解！ http://www.tudou.com/home/_79823675/playlist?qq-pf-to=pcqq.group 一、分片和分区的区别？ 分片是从数据角度，分区是从计算的角度，其实都是从大的状态，split成小的。 二、spark分区理解 rdd作为一个分布式的数据集，是分布在多个worker节点上的。如下图所示，RDD1有

>>阅读原文<<