Amazon s3 将AWS粘合表分区拆分到RDS表

Amazon s3 将AWS粘合表分区拆分到RDS表,amazon-s3,amazon-rds,aws-glue,Amazon S3,Amazon Rds,Aws Glue,我是新来的 我的Glue爬虫使用分区正确地创建了表,从S3获取数据。分区是AccountID列。 现在我需要将数据放入RDS PSQL Aurora,但需要将数据拆分为表,每个AccountID对应的表 你能告诉我怎么做吗 爬虫程序将每晚执行一次,作业就在那之后。您可以使用谓词下推来参数化作业,每次运行都将从一个分区读取并写入RDS表。在这里,您可以在RDS中参数化谓词和表名

我是新来的

我的Glue爬虫使用分区正确地创建了表,从S3获取数据。分区是AccountID列。 现在我需要将数据放入RDS PSQL Aurora,但需要将数据拆分为表,每个AccountID对应的表

你能告诉我怎么做吗


爬虫程序将每晚执行一次,作业就在那之后。

您可以使用谓词下推来参数化作业,每次运行都将从一个分区读取并写入RDS表。在这里,您可以在RDS中参数化谓词和表名