Amazon web services AWS雅典娜-将新文件添加到S3文件夹时会发生什么

Amazon web services AWS雅典娜-将新文件添加到S3文件夹时会发生什么,amazon-web-services,amazon-athena,Amazon Web Services,Amazon Athena,我有一个示例,我将一个文件放在S3中。 我感到困惑的是,当我将新的CSV文件(具有相同的格式)添加到该文件夹时会发生什么 它们是否可以立即查询?或者你必须运行胶水或其他东西来处理它们?例如,如果设置一个Lambda函数,每小时,甚至每5分钟提取一个新的CSV到同一个S3目录,该怎么办 雅典娜是否真的将数据加载到某个数据库的某个地方,以便执行快速查询?如果您的表没有分区,或者您向现有分区添加了一个文件,那么数据将立即可用 但是,如果您不断添加文件,您可能需要考虑对表进行分区以优化查询性能,请参阅:

我有一个示例,我将一个文件放在S3中。 我感到困惑的是,当我将新的CSV文件(具有相同的格式)添加到该文件夹时会发生什么

它们是否可以立即查询?或者你必须运行胶水或其他东西来处理它们?例如,如果设置一个Lambda函数,每小时,甚至每5分钟提取一个新的CSV到同一个S3目录,该怎么办


雅典娜是否真的将数据加载到某个数据库的某个地方,以便执行快速查询?

如果您的表没有分区,或者您向现有分区添加了一个文件,那么数据将立即可用

但是,如果您不断添加文件,您可能需要考虑对表进行分区以优化查询性能,请参阅:


Athena本身没有任何缓存,任何查询都会命中表的S3位置。

如果您的表没有分区,或者您向现有分区添加了一个文件,那么数据将立即可用

但是,如果您不断添加文件,您可能需要考虑对表进行分区以优化查询性能,请参阅:


Athena本身没有任何缓存,任何查询都会命中表的S3位置。

谢谢,我需要按日期分区谢谢,我需要按日期分区