Hadoop（三） 大数据离线计算与实时计算

1、大数据离线计算：MapReduce计算模型 一、MapReduce是处理HDFS上的数据apache 二、MapReduce的思想来源是PageRank（搜索排名），原理是进行分布式计算。windows 如上图，网页跳转中，访问网页3的次数最多，也就是权重最大的为网页3。好比京东、淘宝中给推荐的商品，就是近期访问的比较多的商品。框架 MapReduce的思想是把一个大任务拆分红多个小任务，再把

>>阅读原文<<