#数仓架构分析

数仓基础架构 一.逻辑分析 ODS(存储层) DWD(明细层) DWS(聚合层) ADS(应用层) 技术选型:数仓一般以hadoop生态圈为主,离线以hive为核心;准实时以spark为核心; 实时以flink为核心 二.数据调研 ①业务调研:概念模块(cdm) 逻辑模型(ldm) 物理模型(pdm) ②需求调研:报表需求,统计需求,用户画像,推荐系统 ③数据库调研:了解数据库表数据结构,数据形态
相关文章
相关标签/搜索