MapReduce框架-combiner

Combiner 1.对combiner的理解 combiner其实属于优化方案，因为带宽限制，应该尽可能map和reduce之间的数据传输数量。它在Map端把同一个key的键值对合并在一块儿并计算，计算规则与reduce一致，因此combiner也能够看做特殊的Reducer。 执行combiner操做要求开发者必须在程序中设置了combiner(程序中经过job.setCombinerClas

>>阅读原文<<