关于数据中台的深度思考与总结

数据中台   数据汇聚 数据汇聚是数据中台必须提供的核心工具,把各种异构网络、异构数据源的数据方便地采集到数据中台中进行集中存储,为后续的加工建模做准备。数据汇聚方式一般有数据库同步、埋点、网络爬虫、消息队列等;从汇聚的时效性来分,有离线批量汇聚和实时采集。 数据采集工具 Canal、DataX、Sqoop 数据开发 数据开发模块主要面向开发人员、分析人员,提供离线、实时、算法开发工具。 离线开发
相关文章
相关标签/搜索