Warning: file_get_contents(/data/phpspider/zhask/data//catemap/4/fsharp/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache kafka 为什么我的卡夫卡消费小组不起作用?_Apache Kafka_Kafka Consumer Api_Sarama - Fatal编程技术网

Apache kafka 为什么我的卡夫卡消费小组不起作用?

Apache kafka 为什么我的卡夫卡消费小组不起作用?,apache-kafka,kafka-consumer-api,sarama,Apache Kafka,Kafka Consumer Api,Sarama,我使用的是Golang kafka消费者客户端编写的sarama集群 在broker中,我的主题的分区偏移量是11000,我的消费者组的分区偏移量是10100。 然后我运行我的集群消费者,但没有消费。消耗时间为1~2天后 但是当我在主题的分区中生成消息时,它会消耗掉!在每个分区中 消息的数量是901。 为什么我的消费者集群在生成消息时似乎激活了 我的使用者设置为auto.offset.reset=lastest这是因为您的偏移重置设置。auto.offset.reset=latest意味着您的消

我使用的是Golang kafka消费者客户端编写的sarama集群

在broker中,我的主题的分区偏移量是11000,我的消费者组的分区偏移量是10100。 然后我运行我的集群消费者,但没有消费。消耗时间为1~2天后

但是当我在主题的分区中生成消息时,它会消耗掉!在每个分区中

消息的数量是901。 为什么我的消费者集群在生成消息时似乎激活了


我的使用者设置为auto.offset.reset=lastest

这是因为您的偏移重置设置。auto.offset.reset=latest意味着您的消费群体应等待最新记录。如果要从头开始消费,请使用auto.offset.reset=earlime


卡夫卡官方文档:

但这意味着消费者将开始在0号偏移量处消费????正当在我的例子中,我想使用偏移量10101。我应该提交偏移量编号吗?我想,从特定的偏移量中读取是很困难的。通常,您的消费者从最后一个已知偏移量读取数据。如果偏移量未知,则auto.offset.reset策略生效。可能我需要此文档。