大数据采集

一、大数据的来源 1.人类活动 2.计算机 3.物理世界 二、大数据采集设备 1.科研数据 （1）大型强子对撞机 （2）射电望远镜 （3）电子显微镜 2.网络数据 我们可以利用数据中心采集网络中的数据。 三、大数据采集方法 1.科研数据 2.网络数据 爬虫（慎用） 3.系统日志 （1）Scribe是Facebook开源的日志收集系统，在Facebook内部已经得到大量应用。Scribe架构如下图所

>>阅读原文<<