hadoop mapreduce原理

简介 本文先介绍Google 开源项目mapreduce1.0版。mapreduce的设计是为实现一个抽象的计算框架，使用者不用关心底层如何实现，只须要关注业务逻辑从而计算海量、复杂的原始数据。web 编程模型 设计理念是实现“计算向数据靠拢”，“数据向计算靠拢”会形成大量的I/O消耗，计算过程分为map和reduce阶段。 存储在HDFS中的数据被切分红不少块，这些块能够分发到多个map任务并行

>>阅读原文<<