当前位置:   article > 正文

[Kafka权威指南] Chapter 4. Kafka消费者:消费数据_kafka 最新消费参数earlise

kafka 最新消费参数earlise

Consumer Group

What is Consumer Group ?

Case:前端采集的数据通过Kafka Topic回传至后端分析程序,但是单个分析线程(Consumer)很有可能忙不过来。

既然单个消费者忙不过来,那就多来几个消费者。此时,这些消费者就构成了一个小团队。

Topic中的消息在被分割、摊派后,每个成员(消费者)就自顾自地忙自己那部分。

在Kafka中,这个团队称为”Consumer Group”。

How to distribute Messages ?

至于同一个Topic中的Message如何摊派呢? 

一个Partition给一个消费者。 一对一的形式,易于Partition offset的管理。

当然,Consumer可以同时处理多个Partition。

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/羊村懒王/article/detail/621243
推荐阅读
相关标签
  

闽ICP备14008679号