Apache kafka Kafka:SyncGroup出错,请求超时

Apache kafka Kafka:SyncGroup出错,请求超时,apache-kafka,kafka-consumer-api,Apache Kafka,Kafka Consumer Api,最近,Java Kafka API经常遇到“来自SyncGroup的错误:请求超时” 这个问题通常发生在卡夫卡集群中很少有主题或消费者群体的情况下。有人能提供一些关于这个错误的提示吗? 作为一种解决方法,如果我更改消费者组名称,我看不到错误。 代理版本:0.9.0 卡夫卡客户端版本:0.9.0.1 Exception in thread "main" org.apache.kafka.common.KafkaException: Unexpected error from SyncGroup:

最近,Java Kafka API经常遇到“来自SyncGroup的错误:请求超时”

这个问题通常发生在卡夫卡集群中很少有主题或消费者群体的情况下。有人能提供一些关于这个错误的提示吗? 作为一种解决方法,如果我更改消费者组名称,我看不到错误。 代理版本:0.9.0 卡夫卡客户端版本:0.9.0.1

Exception in thread "main" org.apache.kafka.common.KafkaException: Unexpected error from SyncGroup: The request timed out.

at org.apache.kafka.clients.consumer.internals.AbstractCoordinator$SyncGroupRequestHandler.handle(AbstractCoordinator.java:444)

at org.apache.kafka.clients.consumer.internals.AbstractCoordinator$SyncGroupRequestHandler.handle(AbstractCoordinator.java:411)

at org.apache.kafka.clients.consumer.internals.AbstractCoordinator$CoordinatorResponseHandler.onSuccess(AbstractCoordinator.java:665)

at org.apache.kafka.clients.consumer.internals.AbstractCoordinator$CoordinatorResponseHandler.onSuccess(AbstractCoordinator.java:644)

at org.apache.kafka.clients.consumer.internals.RequestFuture$1.onSuccess(RequestFuture.java:167)

at org.apache.kafka.clients.consumer.internals.RequestFuture.fireSuccess(RequestFuture.java:133)

at org.apache.kafka.clients.consumer.internals.RequestFuture.complete(RequestFuture.java:107)

at org.apache.kafka.clients.consumer.internals.ConsumerNetworkClient$RequestFutureCompletionHandler.onComplete(ConsumerNetworkClient.java:380)

at org.apache.kafka.clients.NetworkClient.poll(NetworkClient.java:274)
@zer0Id0l


我们最近也遇到了同样的问题。发生这种情况是因为某些Kafka Streams消息的元信息占用空间大于常规信息占用空间(当您不使用Kafka Streams时)。要解决此问题,请转到\u消费者偏移量主题设置并将max.message.bytes参数设置为高于默认值。例如,在本例中,我们有max.message.bytes=20971520。这将完全解决您的问题。

您使用的卡夫卡版本是什么?它是0.9.0.1卡夫卡客户端API您可以从客户端节点ping服务器节点吗?卡夫卡服务器也是0.9.0吗?是的,现有的消费者工作正常。代理版本也是0.9.0