MapReduce Shuffle过程深刻理解

MapReduce执行过程 一、设置input,告诉程序输入的数据在那儿。 经过InputFormat接口子类(FileInputFormat, TextInputFormat), (1)读取数据 (2)将数据转换成key-value形式交给Mapper的map()方法进行处理 默认key=行偏移量(LongWritable),value=行数据(Text)web //设置input Path i
相关文章
相关标签/搜索