Kubernetes 如何在Strimzi中使用Kafka connect

我正在使用带有strimzi操作符的Kafka，我创建了一个Kafka集群，还使用yml文件部署了Kafka connect。但在这之后，我完全不知道下一步该怎么办。我了解到Kafka connect用于将数据从源复制到Kafka群集或从Kafka群集复制到另一个目标。 我想使用Kafka connect将数据从文件复制到Kafka群集的任意主题。 有谁能帮我一下吗？我正在共享创建Kafka connect集群时使用的yml文件

apiVersion: kafka.strimzi.io/v1beta1

kind: KafkaConnect

metadata:

  name: my-connect-cluster

#  annotations:

#  # use-connector-resources configures this KafkaConnect

#  # to use KafkaConnector resources to avoid

#  # needing to call the Connect REST API directly

#    strimzi.io/use-connector-resources: "true"

spec:

  version: 2.6.0

  replicas: 1

  bootstrapServers: my-cluster-kafka-bootstrap:9093

  tls:

    trustedCertificates:

      - secretName: my-cluster-cluster-ca-cert

        certificate: ca.crt

  config:

    group.id: connect-cluster

    offset.storage.topic: connect-cluster-offsets

    config.storage.topic: connect-cluster-configs

    status.storage.topic: connect-cluster-status

@kubeclt create-f kafka-connect.yml-n strimzi

卡夫卡连接的吊舱处于运行状态后，我不知道下一步该怎么办。请帮帮我。

Kafka Connect，因此您需要从Connect pod公开该HTTP端点

我了解到Kafka connect用于将数据从源复制到Kafka群集或从Kafka群集复制到另一个目标

这是一个应用程序，但听起来您希望这样做

---

如果不想使用RESTAPI，请取消对此行的注释

#    strimzi.io/use-connector-resources: "true"

并使用另一个YAML文件来配置连接资源。请参见

kind:“KafkaConnector”

Kafka Connect，因此您需要从Connect pod公开该HTTP端点

我了解到Kafka connect用于将数据从源复制到Kafka群集或从Kafka群集复制到另一个目标

这是一个应用程序，但听起来您希望这样做

---

如果不想使用RESTAPI，请取消对此行的注释

#    strimzi.io/use-connector-resources: "true"

并使用另一个YAML文件来配置连接资源。请参见

kind:“卡夫卡康奈特”

看看这个。不是你真正想做的，但很接近。我们使用

kafka console producer.sh

向主题发送消息，并使用文件接收器连接器使用它们

该示例还显示了如何通过基于Strimzi图像创建自己的自定义连接图像来包括其他连接器。对于涉及外部系统的更复杂示例，需要执行此步骤。

请查看此步骤。不是你真正想做的，但很接近。我们使用

kafka console producer.sh

向主题发送消息，并使用文件接收器连接器使用它们

---

该示例还显示了如何通过基于Strimzi图像创建自己的自定义连接图像来包括其他连接器。对于涉及外部系统的更复杂示例，需要执行此步骤。

谢谢您的帮助……但我对此非常熟悉，因此很难理解文档……请您告诉我，我使用您建议的yml创建了Kafka connect和Kafka connector。接下来要做什么..我的意思是如何从一个文件中读取数据并通过终端将其查看到Kafka topic…我的Kafka群集部署在kubernetes群集上。除非执行到Connect容器中，否则k8s中的Kafka Connect不能用于使用文件。但您可以使用任何卡夫卡客户端将数据生成到主题中。然后，如前所述，您需要MirrorMaker，而不是连接，以便将数据发送到另一个Kafka集群中的另一个主题，您可以在该集群中编写消费进程。。。我的老师说使用Strimzi操作符并在本地机器和kafka connect上使用CRD部署kafka群集，kafka bridge和kafka mirror maker是列出的主题…我使用CRD创建了kafka群集，之后我想学习如何使用kafka connect…我创建了kafka connect群集，其pod处于运行状态…之后我不知道该怎么做…我可以在本地机器上使用kafka connect和kafka mirror maker吗？…我还想阅读卡夫卡连接器也需要h，但我不知道如何使用它。我在这里感到困惑…实际上，我的老师告诉我使用strimzi部署卡夫卡群集，并了解了卡夫卡连接，kafka bridge和kafka mirror maker…并使用CRD yml在本地机器上部署它们…我使用CRD创建了kafka群集，并生成和使用数据，了解其工作原理…但现在我正在阅读有关kafka connect的文章，我使用CRD创建了kafka connect群集，但之后我完全不知道下一步该怎么做，只是为了了解它的确切工作情况…你能告诉我在我的Local机器上使用它该怎么做吗？我已经回答了这个问题。。。您需要另一个Kafkanconnector crd，还需要取消对我提到的行的注释。你读过Debezium的例子了吗？谢谢你的帮助…但是我对这个很陌生，所以很难理解文档…你能告诉我一次我使用yml创建了Kafka connect和Kafka connector，这是你建议的。接下来要做什么..我的意思是如何从一个文件中读取数据并通过终端将其查看到Kafka topic…我的Kafka群集部署在kubernetes群集上。除非执行到Connect容器中，否则k8s中的Kafka Connect不能用于使用文件。但您可以使用任何卡夫卡客户端将数据生成到主题中。然后，如前所述，您需要MirrorMaker，而不是连接，以便将数据发送到另一个Kafka集群中的另一个主题，您可以在该集群中编写消费进程。。。我的老师说使用Strimzi操作符并在本地机器和kafka connect上使用CRD部署kafka群集，kafka bridge和kafka mirror maker是列出的主题…我使用CRD创建了kafka群集，之后我想学习如何使用kafka connect…我创建了kafka connect群集，其pod处于运行状态…之后我不知道该怎么做…我可以在本地机器上使用kafka connect和kafka mirror maker吗？…我还想阅读卡夫卡连接器也需要h，但我不知道如何使用。我在这里感到困惑…实际上，我的老师告诉我使用strimzi部署卡夫卡群集，并了解了卡夫卡连接、卡夫卡桥和卡夫卡镜像生成器…并使用CRD yml在yo上部署它们