hadoop里shuffle中的环形缓冲区

最近在看<<Hadoop技术内幕>>里面对shuffle中"奇迹发生的地方"有比较细致的叙述 在这整理一下:         在mapper端业务逻辑走完后,调用MapOutputCollector.collect()输出结果,其中MapOutputCollector这个接口有两个实现类MapOutputBuffer和DirectMapOutputCollector,后者是在没有ReduceTas
相关文章
相关标签/搜索