Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/apache-kafka/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache kafka 将kafka群集迁移到新数据中心_Apache Kafka - Fatal编程技术网

Apache kafka 将kafka群集迁移到新数据中心

Apache kafka 将kafka群集迁移到新数据中心,apache-kafka,Apache Kafka,我有一个小的3节点kafka集群,每个节点大约有20GB的数据。我们正在迁移到一个新的数据中心,因此需要移动集群;两个DC目前都在运行 DC之间的往返时间为: 35 packets transmitted, 35 received, 0% packet loss, time 34048ms rtt min/avg/max/mdev = 2.265/14.883/86.126/22.047 ms 在新DC中设置新节点,复制到它们,然后删除旧节点是否可行?延迟会不会太高 谢谢你的建议。如果这个方法

我有一个小的3节点kafka集群,每个节点大约有20GB的数据。我们正在迁移到一个新的数据中心,因此需要移动集群;两个DC目前都在运行

DC之间的往返时间为:

35 packets transmitted, 35 received, 0% packet loss, time 34048ms
rtt min/avg/max/mdev = 2.265/14.883/86.126/22.047 ms
在新DC中设置新节点,复制到它们,然后删除旧节点是否可行?延迟会不会太高


谢谢你的建议。如果这个方法不行,我欢迎你的建议!谢谢。

请尝试使用MirrorMaker在群集之间复制数据,并为所有与超时相关的配置设置一个稍大的值。

请注意,这种方法不会保留消息偏移量,因此,如果将现有使用者重定向到新的镜像群集,它们将不会以停止时的偏移量继续。根据具体情况,您的消费者可能会跳过或重新处理邮件。