记一次kafka数据丢失问题的排查

数据丢失为大事,针对数据丢失的问题咱们排查结果以下。 第一:是否存在数据丢失的问题?     存在,且已重现。 第二:是在什么地方丢失的数据,是不是YDB的问题?     数据丢失是在导入阶段,数据并无写入到Kafka里面,因此YDB也就不会从Kafka里面消费到缺失的数据,数据丢失与延云YDB无关。 第三:是如何发现有数据丢失?     1.测试数据会一共建立365个分区,每一个分区均是9亿数据
相关文章
相关标签/搜索