map的环形内存缓冲区

map的环形内存缓冲区 博客分类: hadoop源码解读 Hadoop Mapreduce Apache 工作 hadoop在执行MapReduce任务时,在map阶段,map函数产生的输出,并不是直接写入磁盘的。为了提高效率,它将输出结果先写入到内存中(即 环形内存缓冲区,默认大小100M),再从缓冲区(溢)写入磁盘。 下面我们就来看看这段代码。 1、找到环形内存缓冲区 在运行job时,有条输出
相关文章
相关标签/搜索