【HADOOP】hadoop streaming指定不执行reducer过程

有时候,咱们只须要对文件作并发处理,并不关心相同key的记录间的关系。并发 这时,只须要map函数处理输入数据。app 若是不指定reducer选项,系统仍然会默认执行一次cat命令。框架 如何去了没必要要的分桶排序操做呢?函数 方法一: 排序 把mapred.reduce.tasks设置为零,Map/reduce框架就不会建立reducer任务,mapper任务的输出就是整个做业的最终输出。ma
相关文章
相关标签/搜索