海量数据处理方案

什么是海量数据？ 正如《逍遥游》中的一句话：北冥有鱼，其名为鲲，鲲之大，一锅炖不下，化而为鸟，其名为鹏，鹏之大，需要两个烧烤架；简单的可以把这里的海量数据理解为这里的鲲鹏 ，数据大到一个服务器存不下，就需要两个甚至多个服务器来存储。而接下来我们需要做的就是用一台服务器来处理海量数据。 以下是一些海量数据处理的例子： 1. 给定一个大小超过 100G 的文件, 其中存在 IP 地址, 找到其中出现次

>>阅读原文<<