全面剖析各类大数据的处理框架

前言：说起大数据处理，一切都起源于Google公司的经典论文：《MapReduce：Simplied Data Processing on Large Clusters》。在当时(2000年左右)，由于网页数量急剧增加，Google公司内部平时要编写很多的程序来处理大量的原始数据：爬虫爬到的网页、网页请求日志；计算各种类型的派生数据：倒排索引、网页的各种图结构等等。这些计算在概念上很容易理解，但由

>>阅读原文<<