建设实时数仓之前的思考与方案记录

前言 随着这次新冠疫情带来的机遇,我司业务飞速增长,实时数仓的建设已经提上了日程。虽然还没有正式开始实施,但是汲取前人的经验,做好万全的准备总是必要的。本文简单松散地记录一下想法,不涉及维度建模方法论的事情(这个就老老实实去问Kimball他老人家吧)。 动机 随着业务快速增长,传统离线数仓的不足暴露出来: 运维层面——所有调度任务只能在业务闲时(凌晨)集中启动,集群压力大,耗时越来越长; 业务层
相关文章
相关标签/搜索