mapreduce中Partitioner数量与reducetask数量对结果影响

图中可以看出Partition主要作用就是将map的结果发送到相应的reduce。 1.现在测试一下第一种情况,Partition数量为1,返回值0,reduce数量为3。 设置reduce数量 设置Partition数量 结果输出3个文件,但只有part-r-00000有内容,其它两个为0字节。 2.现在测试一下第二种情况,Partition数量为1,返回值5,reduce数量为3。 设置red
相关文章
相关标签/搜索