Apache kafka 如何将每秒接收的kafka群集消息扩展到更高?
我尝试将msgs/秒放大。我使用librdkafka的rdkafka_性能生成消息并将其发送到我的Kafka集群。对于1 rdkafka_性能应用程序,它可以每秒向我的群集发送130万MSG。因此,我使用9个rdkafka_性能应用程序向我的集群发送消息(它应该每秒产生大约1000万msg)。在我的3个代理群中,它可以每秒接收700万MSG。但当我再添加一个代理时,结果仍然是700万毫秒/秒。 那么,我可以通过添加代理的数量来增加每秒的消息数量吗?还是不能Apache kafka 如何将每秒接收的kafka群集消息扩展到更高?,apache-kafka,Apache Kafka,我尝试将msgs/秒放大。我使用librdkafka的rdkafka_性能生成消息并将其发送到我的Kafka集群。对于1 rdkafka_性能应用程序,它可以每秒向我的群集发送130万MSG。因此,我使用9个rdkafka_性能应用程序向我的集群发送消息(它应该每秒产生大约1000万msg)。在我的3个代理群中,它可以每秒接收700万MSG。但当我再添加一个代理时,结果仍然是700万毫秒/秒。 那么,我可以通过添加代理的数量来增加每秒的消息数量吗?还是不能 谢谢。您要将数据发送到多少个主题?当我
谢谢。您要将数据发送到多少个主题?当我有3个代理时,我会将数据发送到1个包含3个分区的主题,当我再添加一个代理时,我会将数据发送到1个包含4个分区的主题。结果是一样的。