nginx代理kafka集群，消费不到数据_nginx 负载均衡kafka

作者：我家小花儿 | 2024-03-05 17:42:13

踩

nginx 负载均衡kafka

nginx问题

问题：今天在生成中出现nginx通过代理消费kafka集群，生成数据正常，并且消费数据数据前置机可以消费，而内网机出现有时消费到数据有时消费不到数据。

nginx配置如下：
在这里插入图片描述

消费出现有是有能消费，而有时候确消费不到
原因：
上报正常是因为，生产数据指定到partition上，而因为kafka集群的数据时互通的。
而在消费数据的时候nginx代理会随机指定到某一台服务器上，特定的partition，而如果这台服务器上没有对应的topic的partition，kafka就会报出Received unknown topic or partition error in ListOffset 错误
解决方案：
增加三台nginx代理服务器或者，在nginx增加三个Listen，每一个监听一个服务器

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/我家小花儿/article/detail/192757?site