算法基石-实时数据质量如何保障？

优酷视频搜索是文娱分发场最核心的入口之一，数据源多、业务逻辑复杂，尤其实时系统的质量保障是一个巨大挑战。如何保障数据质量，如何衡量数据变化对业务的影响？本文会做详细解答。 一、现状分析 搜索数据流程如下图所示，从内容生产到生成索引经历了复杂的数据处理流程，中间表多达千余张，实时数据消费即消失，难以追踪和复现。 从上图可以看出，整个系统以实时流模式为数据流通主体，业务层面按实体类型打平，入口统一分层

>>阅读原文<<