Spark的键值对RDD数据分区器和数据读取与保存

键值对RDD数据分区器 Spark目前支持Hash分区和Range分区，用户也能够自定义分区，Hash分区为当前的默认分区，Spark中分区器直接决定了RDD中分区的个数、RDD中每条数据通过Shuffle过程属于哪一个分区和Reduce的个数java 注意： (1)只有Key-Value类型的RDD才有分区器的，非Key-Value类型的RDD分区器的值是None (2)每一个RDD的分区ID范

>>阅读原文<<