Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/apache-kafka/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache kafka 卡夫卡偏移量信息不可用_Apache Kafka_Offset - Fatal编程技术网

Apache kafka 卡夫卡偏移量信息不可用

Apache kafka 卡夫卡偏移量信息不可用,apache-kafka,offset,Apache Kafka,Offset,当我登录到我的Kafka Manager(版本0.8.2.0)时,我可以看到每个主题和分区的最新偏移量信息。我希望能够以编程方式获取最新的偏移量。所以我继续学习这个例子,但我没有得到任何回应 然后我继续读下去 该偏移量信息应保存在Zookeeper中的/consumers/[groupId]/offsets/[topic]/[partitionId]->long(偏移量)下 所以我检查了我的Zookeeper(列在Kafka Manager的集群信息下),但在/consumer(基本上是一个空文

当我登录到我的Kafka Manager(版本0.8.2.0)时,我可以看到每个主题和分区的最新偏移量信息。我希望能够以编程方式获取最新的偏移量。所以我继续学习这个例子,但我没有得到任何回应

然后我继续读下去 该偏移量信息应保存在Zookeeper中的/consumers/[groupId]/offsets/[topic]/[partitionId]->long(偏移量)下

所以我检查了我的Zookeeper(列在Kafka Manager的集群信息下),但在/consumer(基本上是一个空文档)下没有看到任何内容


有人能帮我找到这个信息吗?我的卡夫卡配置是否存在最新偏移量未存储在/consumer下的错误?但是,卡夫卡经理从哪里得到这些信息呢?其他一些Zookeeper?

与卡夫卡现在处理的偏移量相关的信息,因此它存储在私有(不可删除)主题调用“\uu consumer\u offset-”中的信息,您可以通过检查“config/server.properties”中的log.dirs属性找到该主题的位置

我确实在我的主题列表中看到一个主题u消费者u偏移量,但它没有任何数据(所有分区的所有偏移量均为0)。在同一个集群中,还有其他包含数据的主题,因此u消费者u偏移量应该包含一些内容-我如何检查这些内容?那个Api仍然没有返回任何信息。另外,谁应该更新_消费者_偏移量,这可能是配置问题吗?如果enable.auto.commit=true,消费者的偏移量可以由kafka更新。如果您有消费者消费数据,那么_消费者_偏移量将包含数据,您应该能够在消费者的日志中看到这些数据。