Java Flink Kafka面向多个主题的消费者_Java_Apache Kafka_Streaming_Apache Flink

Java Flink Kafka面向多个主题的消费者

java apache-kafka streaming apache-flink

Java Flink Kafka面向多个主题的消费者,java,apache-kafka,streaming,apache-flink,Java,Apache Kafka,Streaming,Apache Flink,我有一个Flink Kafka消费者，它阅读多个Kafka主题（在我的例子中是3个）。kafka上每个主题有5个分区。默认情况下，Flink创建了多少消费者是：每个主题5个消费者。即，在所有15名消费者中共有5名消费者 kafka消息的使用非常缓慢，因此我无法计算每个主题的使用者数量。使用者数量等于源函数的并行性。源操作符的每个并行实例只有一个使用者。如果您未配置并行性，我认为它可能默认为1的并行性，这当然可以解释速度慢的原因如果您正在运行一个独立的集群，webGUI将在运行时向您显示源

我有一个Flink Kafka消费者，它阅读多个Kafka主题（在我的例子中是3个）。kafka上每个主题有5个分区。默认情况下，Flink创建了多少消费者

是：

每个主题5个消费者。即，在所有15名消费者中

共有5名消费者

kafka消息的使用非常缓慢，因此我无法计算每个主题的使用者数量。

使用者数量等于源函数的并行性。源操作符的每个并行实例只有一个使用者。如果您未配置并行性，我认为它可能默认为1的并行性，这当然可以解释速度慢的原因

如果您正在运行一个独立的集群，webGUI将在运行时向您显示源函数的并行性