大数据之路~第一章 总述

    接下来,我们以阿里巴巴大数据架构图来介绍。     大数据系统体系分为数据采集层、数据计算层、数据服务层和数据应用层。简单介绍一下这四层的具体作用和使用到的技术(讲述的内容包含但不限于阿里巴巴的知识):     1 数据采集层          数据采集的对象主要是传统数据库数据和日志数据。一般公司采用sqoop开源工具采集传统数据库数据,大公司会开发专门工具。例如,阿里的DataX和同步
相关文章
相关标签/搜索