Apache kafka 在非幂等体系结构中备份卡夫卡
我们正在开发一个事件源解决方案的体系结构，利用Kafka流和vanilla Kafka主题消费/生成消息。“工人”不是幂等的，但我们依赖于消费群体。卡夫卡 通过查看卡夫卡真正备份（即复制不是备份）解决方案的选项，我们看到了各种S3连接器，并查看了Confluent的Replicator以及即将推出的MirrorMaker 2。据我所知，在主题删除和时间点恢复方面，没有一个能够提供真正的保护 作为一家小型初创公司，我们不希望在内部运营卡夫卡，尽管磁盘级快照（我所知的任何演员都不提供）似乎是前进的方向Apache kafka 在非幂等体系结构中备份卡夫卡,apache-kafka,backup,event-sourcing,Apache Kafka,Backup,Event Sourcing,我们正在开发一个事件源解决方案的体系结构，利用Kafka流和vanilla Kafka主题消费/生成消息。“工人”不是幂等的，但我们依赖于消费群体。卡夫卡 通过查看卡夫卡真正备份（即复制不是备份）解决方案的选项，我们看到了各种S3连接器，并查看了Confluent的Replicator以及即将推出的MirrorMaker 2。据我所知，在主题删除和时间点恢复方面，没有一个能够提供真正的保护 作为一家小型初创公司，我们不希望在内部运营卡夫卡，尽管磁盘级快照（我所知的任何演员都不提供）似乎是前进的方
看过AWS MSK、Confluent和CloudKarafka之后，我很想听听您在类似（或至少近似）体系结构中的经验、优点/缺点和解决方案……您是否评估了portworx kafka….MM2应提供“时间点”，基于您可以在特定时间寻求补偿的事实（考虑到它仍然保留）。防止主题删除可以通过适当的ACL来解决。否则，您需要查看磁盘快照