将数据从S3移动到Postgresql

将数据从S3移动到Postgresql,postgresql,amazon-s3,Postgresql,Amazon S3,我想将批量数据(zip文件)从s3移动到PostgreSQL。AWS中是否有任何服务/解决方案 我尝试了数据管道,但它没有s3到Postgres的模板 我尝试了aws_s3 extension and copy命令,但这些命令仅适用于csv、文本、json,并且仅适用于单个文件,而不适用于移动批量数据。查看文档,我怀疑您可以使用aws数据管道将Amazon RDS PostgreSQL数据库作为MySQL数据库的目标。但是,您是对的——它不会对Zip文件进行操作。您需要先解压缩文件。为什么要在P

我想将批量数据(zip文件)从s3移动到PostgreSQL。AWS中是否有任何服务/解决方案

我尝试了数据管道,但它没有s3到Postgres的模板


我尝试了aws_s3 extension and copy命令,但这些命令仅适用于csv、文本、json,并且仅适用于单个文件,而不适用于移动批量数据。

查看文档,我怀疑您可以使用aws数据管道将Amazon RDS PostgreSQL数据库作为MySQL数据库的目标。但是,您是对的——它不会对Zip文件进行操作。您需要先解压缩文件。为什么要在Postgres数据库中存储ZIP文件?S3似乎是一个更好的选择。也许你可以澄清你的问题:你想在Postgres中存储zip文件本身,还是只存储其内容(如csv文件)?是的,它不一定是zip文件,我会先解压缩它们。基本上,这些是从现有Prod数据库(Postgres sql和mongoDB)移动到S3的备份文件,现在我将这些文件.bak(备份或tar)文件移动到新的Rds(Postgres)服务器。我每周都想将S3数据迁移到RDS(postgres),但除了使用Mysql模板的数据管道之外,似乎没有直接的解决方案。