Apache flink 将RocksDB状态快照数据导出到配置单元

Apache flink 将RocksDB状态快照数据导出到配置单元,apache-flink,Apache Flink,我是Flink的新手,刚开始写一个基于Flink的项目。我的Flink作业使用RocksDB作为状态存储,并打开检查点,每15分钟向S3拍摄一次状态存储快照 我需要从配置单元中查询状态存储的数据进行一些数据分析,发现S3上的检查点的状态数据无法从配置单元中使用。有没有办法将RocksDB中的所有数据作为拼花文件导出到S3,以便我可以从Hive中查询它们 谢谢 您可以使用Flink的方法从Flink保存点(以及某些检查点)提取数据,但不能保证使用检查点 有关示例,请参见 拥有你的工作可能更简单

我是Flink的新手,刚开始写一个基于Flink的项目。我的Flink作业使用RocksDB作为状态存储,并打开检查点,每15分钟向S3拍摄一次状态存储快照

我需要从配置单元中查询状态存储的数据进行一些数据分析,发现S3上的检查点的状态数据无法从配置单元中使用。有没有办法将RocksDB中的所有数据作为拼花文件导出到S3,以便我可以从Hive中查询它们


谢谢

您可以使用Flink的方法从Flink保存点(以及某些检查点)提取数据,但不能保证使用检查点

有关示例,请参见

拥有你的工作可能更简单