Apache kafka 合流卡夫卡-利率限制

Apache kafka 合流卡夫卡-利率限制,apache-kafka,confluent-platform,Apache Kafka,Confluent Platform,速率限制:由于Kafka能够以远高于MQ的速率生成消息,我们是否可以在Kafka consumer上进行一些配置设置,以启用速率限制传输以保护MQ的稳定性 同样是一次语义-了解kafka支持一次语义,这将阻止消费者已经使用的消息的重新传输。有人可以指导我如何设置此配置吗 我们正在组织中使用confluent kafka enterprise版本。速率限制:kafka基于此,因此您的消费者可以自行读取消息并将其传输到MQ(但如果第二个系统不断变慢,kafka中未处理的消息的缓冲区将随着时间的推移而

速率限制:由于Kafka能够以远高于MQ的速率生成消息,我们是否可以在Kafka consumer上进行一些配置设置,以启用速率限制传输以保护MQ的稳定性

同样是一次语义-了解kafka支持一次语义,这将阻止消费者已经使用的消息的重新传输。有人可以指导我如何设置此配置吗

我们正在组织中使用confluent kafka enterprise版本。

速率限制:kafka基于此,因此您的消费者可以自行读取消息并将其传输到MQ(但如果第二个系统不断变慢,kafka中未处理的消息的缓冲区将随着时间的推移而增加)

精确一次语义:为确保消费者在成功处理消息后需要手动提交读取偏移量(默认行为是在小超时后自动提交读取偏移量。如果在提交读取偏移量之后但在消息处理结束之前失败,则可能导致消息丢失)