Fatal编程技术网
  • docker/
  • 如何将数据从s3读入卡夫卡（Docker图像）

如何将数据从s3读入卡夫卡（Docker图像）

docker apache-kafka

如何将数据从s3读入卡夫卡（Docker图像）,docker,apache-kafka,apache-kafka-connect,confluent-platform,Docker,Apache Kafka,Apache Kafka Connect,Confluent Platform,我已经在windows中的docker上安装了kafka，它正在运行，屏幕截图如下，我已经使用此链接安装了“AmazonS3SourceConnector” 我的问题是： i） 如何执行命令以查看所有kakfa主题（不是通过GUI） ii）如何检查S3源连接器是否已安装（我指的是位置或cli…） iii）和link还指定创建和使用“quickstart-s3source.properties”，我在哪里可以这样做？在我的桌面上的docker 关于您的问题标题，源连接器不读取任意S3数据，只读取

我已经在windows中的docker上安装了kafka，它正在运行，屏幕截图如下，我已经使用此链接安装了“AmazonS3SourceConnector”

我的问题是：

i） 如何执行命令以查看所有kakfa主题（不是通过GUI）

ii）如何检查S3源连接器是否已安装（我指的是位置或cli…）

iii）和link还指定创建和使用“quickstart-s3source.properties”，我在哪里可以这样做？在我的桌面上的docker

关于您的问题标题，源连接器不读取任意S3数据，只读取S3接收器写入的数据

执行命令查看所有kakfa主题

kafka主题——列表

检查是否安装了S3源连接器

您只运行datagen连接器，它不包括S3源代码，但您将使用Connect服务器的
/connector插件
端点

指定创建和使用“quickstart-s3source.properties”

您需要将其转换为JSON，因为Docker运行一个分布式连接服务器，而这些快速启动文件将与独立服务器一起使用。创建文件的位置无关紧要，只要通过HTTP POST将其提供给Connect服务器即可