谈谈ETL中的数据质量

数据质量监控背景 当我们把数据导入数据仓库时,ETL中的每个步骤中都可能会遇到数据质量错误。比如与源系统的连接错误,抽取数据可能会失败。由于记录类型冲突,数据转换可能会失败。即使的ETL任务成功,提取的记录中也会出现异常值,导致后续过程报错。 那么如何主动捕获这些错误,并确保数据仓库中的数据质量? 接下来,我们来总结5条规则,在做ETL的过程中,使用这些规则来确保数据仓库中的数据质量。 数据质量监
相关文章
相关标签/搜索