Combiners

Combiners 怎么理解combiners? 1、每一个map可能会产生大量的输出，combiner的作用就是在map端对输出先做一次合并，以减少传输到reducer的数据量。 2、combiner最基本是实现本地key的归并，combiner具有类似本地的reduce功能。 3、如果不用combiner，那么，所有的结果都是reduce完成，效率会相对低下。使用combiner，先完成的ma

>>阅读原文<<