Kafka源JDBC连接器-微批处理

Kafka源JDBC连接器-微批处理,jdbc,apache-kafka,apache-kafka-connect,Jdbc,Apache Kafka,Apache Kafka Connect,作为POC的一部分,我有一个Kafka JDBC源连接器任务,它基本上读取MySQL表的所有内容,并将记录转储到Kafka主题中 该表仅包含2条记录&my batch.max.rows值为2。当任务在“批量”模式下运行时,我在kafka主题中看到2条单独的JSON记录。如何配置连接器以插入1条JSON记录,其中包含包含这2条记录的JSON数组。最终,发布到kafka topic的消息数将由2改为1。每个数据库行将成为唯一的kafka记录 如果您想加入/窗口记录,那么您将使用流处理器谢谢。。是的,

作为POC的一部分,我有一个Kafka JDBC源连接器任务,它基本上读取MySQL表的所有内容,并将记录转储到Kafka主题中


该表仅包含2条记录&my batch.max.rows值为2。当任务在“批量”模式下运行时,我在kafka主题中看到2条单独的JSON记录。如何配置连接器以插入1条JSON记录,其中包含包含这2条记录的JSON数组。最终,发布到kafka topic的消息数将由2改为1。

每个数据库行将成为唯一的kafka记录


如果您想加入/窗口记录,那么您将使用流处理器

谢谢。。是的,我意识到那会更简单。