MapReduce 详解

MapReduce的整个运行分为两个阶段： Map和Reduce Map阶段由一定数量的Map Task组成 输入格式的数据格式化：InputFormat 数日数据的处理:Mapper 数据分组：Partitioner 下面流程图： 1. Map task 首先从HDFS上Read文件，通过Input Format把分件切分成一个一个的split.生成<Key,Value> key默认用行在文件中

>>阅读原文<<