Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/apache-kafka/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache kafka 如何将每秒接收的kafka群集消息扩展到更高?_Apache Kafka - Fatal编程技术网

Apache kafka 如何将每秒接收的kafka群集消息扩展到更高?

Apache kafka 如何将每秒接收的kafka群集消息扩展到更高?,apache-kafka,Apache Kafka,我尝试将msgs/秒放大。我使用librdkafka的rdkafka_性能生成消息并将其发送到我的Kafka集群。对于1 rdkafka_性能应用程序,它可以每秒向我的群集发送130万MSG。因此,我使用9个rdkafka_性能应用程序向我的集群发送消息(它应该每秒产生大约1000万msg)。在我的3个代理群中,它可以每秒接收700万MSG。但当我再添加一个代理时,结果仍然是700万毫秒/秒。 那么,我可以通过添加代理的数量来增加每秒的消息数量吗?还是不能 谢谢。您要将数据发送到多少个主题?当我

我尝试将msgs/秒放大。我使用librdkafka的rdkafka_性能生成消息并将其发送到我的Kafka集群。对于1 rdkafka_性能应用程序,它可以每秒向我的群集发送130万MSG。因此,我使用9个rdkafka_性能应用程序向我的集群发送消息(它应该每秒产生大约1000万msg)。在我的3个代理群中,它可以每秒接收700万MSG。但当我再添加一个代理时,结果仍然是700万毫秒/秒。 那么,我可以通过添加代理的数量来增加每秒的消息数量吗?还是不能


谢谢。

您要将数据发送到多少个主题?当我有3个代理时,我会将数据发送到1个包含3个分区的主题,当我再添加一个代理时,我会将数据发送到1个包含4个分区的主题。结果是一样的。