kafka消费者链接topic分区失败形成消息大量堆积

晚上7点收到topic堆积告警,经检查,发现消费者到topic分区断连,分区覆盖率降低为0,因为业务TPS高,因此几分钟内即造成上千万条消息堆积,业务成功率降低明显,第一时间怀疑晚上高峰期业务量大,带宽消耗大,网络不稳定形成的,因此第一时间增长消费方的超时时间(socket.timeout.ms)并重启,消费者随即链接成功,从新开始消费,堆积逐渐减少,业务逐渐恢复。性能优化 但一周不到再次出现一样
相关文章
相关标签/搜索