MR知识点汇总

  Map端的调优属性 io.sort.mb int 100 排序Map输出是所使用内存缓冲区的大小,以MB为单位 io.sort.record.percent float 0.05 用作存储Map输出记录边界的io.sort.mb的比例,剩余的空间存储Map输出记录本身 io.sort.spill.percent float 0.8 Map输出内存缓冲和用来开始磁盘溢出写过程的记录边界索引,是两
相关文章
相关标签/搜索