mapreduce当中的GroupingComparator分组详解

GroupingComparator是mapreduce当中reduce端的一个功能组件,主要的作用是决定哪些数据作为一组,调用一次reduce的逻辑,默认是每个不同的key,作为多个不同的组,每个组调用一次reduce逻辑,我们可以自定义GroupingComparator实现不同的key作为同一个组,调用一次reduce逻辑 1、分组排序步骤: (1)自定义类继承WritableCompara
相关文章
相关标签/搜索