MapReduce的基本设计思想

来源：51CTO 机械工业出版社 做者：黄宜华程序员 面向大规模数据处理，MapReduce有如下三个层面上的基本设计思想。算法 1.对付大数据并行处理：分而治之编程     一个大数据若能够分为具备一样计算过程的数据块，而且这些数据块之间不存在数据依赖关系，则提升处理速度的最好办法就是采用“分而治之”的策略进行 并行化计算。MapReduce采用了这种“分而治之”的设计思想，对相互间不具备或者有

>>阅读原文<<