大数据算法

前言 1.MapReduce计算框架流程 Mapper（映射器）： 1）对数据进行分片，划分红多个Splits（每一个Split按照块大小划分），每一个Split都对应一个Mapper 2）Mapper对应的将Split中的数据进行映射成（key，value）web Reducer（归约器） 对Mapper处理后的数据依次进行排序（默认按照字典排序），混洗，分组（Partitioner进行分区，分

>>阅读原文<<