Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/amazon-s3/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Amazon s3 卡夫卡至S3连接器_Amazon S3_Apache Kafka_Apache Kafka Connect_Confluent Platform - Fatal编程技术网

Amazon s3 卡夫卡至S3连接器

Amazon s3 卡夫卡至S3连接器,amazon-s3,apache-kafka,apache-kafka-connect,confluent-platform,Amazon S3,Apache Kafka,Apache Kafka Connect,Confluent Platform,假设我们在独立模式下使用Kafka S3接收器连接器。 正如合流页面上所写的,它有一个确切的交付保证。 我不明白它是怎么工作的。。。 例如,如果-在某个时间点,连接器将消息写入S3,但没有将偏移提交到Kafka主题并将其粉碎。 下次启动时,它应该再次处理以前的消息? 还是在内部使用事务处理?你读过博客吗@cricket_007很棒的文章,谢谢!现在,我了解了全部情况,它是如何工作的。

假设我们在独立模式下使用Kafka S3接收器连接器。 正如合流页面上所写的,它有一个确切的交付保证。 我不明白它是怎么工作的。。。 例如,如果-在某个时间点,连接器将消息写入S3,但没有将偏移提交到Kafka主题并将其粉碎。 下次启动时,它应该再次处理以前的消息?

还是在内部使用事务处理?

你读过博客吗@cricket_007很棒的文章,谢谢!现在,我了解了全部情况,它是如何工作的。