Apache kafka 卡夫卡镜子制造者-从旧版本到新版本

Apache kafka 卡夫卡镜子制造者-从旧版本到新版本,apache-kafka,Apache Kafka,我想从Kafka源群集镜像到Kafka目标群集。如果源集群和目标集群都在同一版本(比如0.10.0.0)上,那么一切都正常工作,但当源集群在0.8.2.1上,目标集群在0.10.0.0上时,一切都不工作 有人知道吗 提前谢谢 我遇到了同样的问题。似乎只有当源集群和目标集群的版本相同时,mirrormaker才起作用。我可以确认这不起作用。我使用Confluent Platform 3.0中的MirrorMaker进行了测试。我试图从卡夫卡0.8.2.2复制到卡夫卡0.10.1.1。我无法让他们工

我想从Kafka源群集镜像到Kafka目标群集。如果源集群和目标集群都在同一版本(比如0.10.0.0)上,那么一切都正常工作,但当源集群在0.8.2.1上,目标集群在0.10.0.0上时,一切都不工作

有人知道吗


提前谢谢

我遇到了同样的问题。似乎只有当源集群和目标集群的版本相同时,mirrormaker才起作用。

我可以确认这不起作用。我使用Confluent Platform 3.0中的MirrorMaker进行了测试。我试图从卡夫卡0.8.2.2复制到卡夫卡0.10.1.1。我无法让他们工作。在0.8.2.2至0.8.2.2期间工作良好,在0.10.1.1至0.10.1.1期间工作良好

此外,MirrorMaker不会将任何消费者补偿从旧同步到新。这意味着在旧集群中使用的任何消息都需要在新集群中再次使用。除非存在某种类型的TTL,否则应用程序逻辑可以处理重复消息。但是,如果你需要重新处理数百万条消息,那么即使你的应用程序具有满足重复的逻辑,这也是一种资源浪费


我们试图设置两个具有不同版本的实时群集,并使用MirrorMaker在它们之间进行同步,并让一些旧版本的消费者使用旧群集,而新版本的消费者使用新群集,但现在证明这不起作用。

这应该是一个评论