MapReduce程序运行流程

为了方便理解,先用作图的方式进行阐述:          MapReduce程序的执行过程分为两个阶段:Mapper阶段和Reducer阶段。 其中Mapper阶段可以分为6个步骤: 第一阶段:先将HDFS中的输入文件file按照一定的标准进行切片,默认切片的类为FileInputFormat,通过切片输入文件将会变成split1、split2、split3……;随后对输入切片split按照一定的
相关文章
相关标签/搜索