Kafka处理数据超时导致Offset回滚，重复消费_kafka 重启后重复消费

作者：代码探险家 | 2024-06-19 01:55:27

踩

kafka 重启后重复消费

线上报警群开始大量报警
在这里插入图片描述
查看日志offset也都是同一个

相同的消息已经消费过，也业务处理已经成功
重复消费说明没有commit

继续排查有没有失败的日志
在这里插入图片描述
大概意思是数据处理时间太长，超过了设定的超时时间，这个消费端已经被移除了group，无法提交了

改下kafka配置
每次拉取的数量减少些，poll超时间隔拉长点
在这里插入图片描述
参考：http://t.zoukankan.com/yx88-p-11013338.html

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/代码探险家/article/detail/734987