Apache kafka 在分布式模式下运行kafka connect?

Apache kafka 在分布式模式下运行kafka connect?,apache-kafka,kafka-consumer-api,apache-kafka-connect,confluent-platform,Apache Kafka,Kafka Consumer Api,Apache Kafka Connect,Confluent Platform,我总共有3个虚拟机(CloudVP)。它们中的每一个都安装了java,融合的开放源码。在VM1中,我正在运行3个Splunk接收器连接器进程,这些进程从不同的主题读取数据,并在不同的端口上运行。使用REST调用,我将JSON配置发布到每个调用中 因为我在分布式模式下运行,所以我也想利用其他两个虚拟机。谁能告诉我该怎么做,向这三个进程添加另外两个VM以实现并行处理。您只需在三个VM上以分布式模式运行Kafka Connect,并确保为它们提供相同的group.id,该id将它们标识为同一集群的成员

我总共有3个虚拟机(CloudVP)。它们中的每一个都安装了java,融合的开放源码。在VM1中,我正在运行3个Splunk接收器连接器进程,这些进程从不同的主题读取数据,并在不同的端口上运行。使用REST调用,我将JSON配置发布到每个调用中


因为我在分布式模式下运行,所以我也想利用其他两个虚拟机。谁能告诉我该怎么做,向这三个进程添加另外两个VM以实现并行处理。

您只需在三个VM上以分布式模式运行Kafka Connect,并确保为它们提供相同的
group.id
,该id将它们标识为同一集群的成员(因此有资格在它们之间共享任务的工作负载)。有关分布式模式的更多配置详细信息

另见:


对于kubernetes群集上的kafka connect分布式模式,您是否有类似的文档或舵图?