MapReduce基本调优策略

设置reduce数量 默认状况下,一个块对应一个map。 默认状况下只有一个reduce。 设置reduce个数:web job.setNumReduceTasks(2); //设置reduce的个数 或者 conf.set("mapreduce.job.reduces", "2"); //设置reduce的个数 实际中reduce的个数要进行不断的测试获取一个趋于平稳的值。算法 map任务
相关文章
相关标签/搜索