MapReduce 计算任务的步骤

图示: 第1步:InputFormat InputFormat 到HDFS上读取数据,将数据传给Split 第2步:Split Split将数据进行逻辑切分,将数据传给RR 第3步:RR RR:将传入的数据转换成一行一行的数据,输出行首字母偏移量和偏移量对应的数据,将数据传给MAP 第4步:MAP MAP:根据业务需求实现自定义代码,将数据传给Shuffle的partition 第5步:parti
相关文章
相关标签/搜索