job的文件split计算法则

计算切片数量和大小(注意视频中的是hadoop 2.7.3,每个版本的方法都有变动,以实际为准) List<InputSplit> splits = input.getSplits(job); 切片数量选择过程   最小值(肯定>=1):long minSize = Math.max(getFormatMinSplitSize(), getMinSplitSize(job)); 返回的是1 最大值
相关文章
相关标签/搜索