本身设置mapreduce程序的map个数和reduce个数

设置reduce个数(一个reduce生成一个文件) 一、若是不指定reduce个数,hive会基于一下两个参数自动计算       (1)hive.exec.reducers.bytes.per.reducer                 这是每一个reduce处理的数据量,默认为1G=1000000000        (2)hive.exec.reducers.max(每一个任务的最大r
相关文章
相关标签/搜索