Hadoop源代码分析(MapTask辅助类,II)

为什么80%的码农都做不了架构师?>>>    有了上面Mapper输出的内存存储结构和硬盘存储结构讨论,我们来仔细分析MapOutputBuffer的流程。首先是成员变量。最先初始化的是作业配置job和统计功能reporter。通过配置,MapOutputBuffer可以获取本地文件系统(localFs和rfs),Reducer的数目和Partitioner。 SpillRecord是文件spi
相关文章
相关标签/搜索