大数据学习（5）MapReduce切片（Split）和分区（Partitioner）

MapReduce中，分片、分区、排序和分组（Group）的关系图：php   分片大小 对于HDFS中存储的一个文件，要进行Map处理前，须要将它切分红多个块，才能分配给不一样的MapTask去执行。 分片的数量等于启动的MapTask的数量。默认状况下，分片的大小就是HDFS的blockSize。css Map阶段的对数据文件的切片，使用以下判断逻辑：html protected long

>>阅读原文<<