MapReduce之Combiner合并

Combiner是MR程序中Mapper和Reducer之外的一种组件(本质是一个Reducer类) Combinr组件的父类就是Reducer Conbimer只有在驱动类里设置了之后,才会运行 Combiner和Reducer的区别在于运行的位置: map----sort—copy—sort(shuffle阶段)—reduce ==Combiner是在每一个MapTask所在的节点运行 Red
相关文章
相关标签/搜索