Hadoop ——mapreduce——partitioner 理解

partitioner是在mapreduce的map过程之后,将mapper输出文件分成几个文件,再交由reducer处理。 之前老以为是在reducer阶段进行的partitioner,所以导致自己写了分区类,有了不同的文件输出,但是输出文件中的其中一个文件什么都没有。   code: import org.apache.hadoop.io.IntWritable; import org.apa
相关文章
相关标签/搜索