如何使用Airflow将最新文件从s3 bucket下载到本地计算机
是否有一种方法可以使用Airflow将最新文件从S3 bucket下载到我的本地系统中如何使用Airflow将最新文件从s3 bucket下载到本地计算机,airflow,Airflow,是否有一种方法可以使用Airflow将最新文件从S3 bucket下载到我的本地系统中 因为我是气流的新手,所以我不知道如何继续。请协助。简短回答:您可以使用检测某个密钥何时出现在S3存储桶中,然后使用获取密钥的内容 假设您完全不熟悉气流,我建议: 从 仔细阅读,然后 用作您自己的DAG的起点 作为后续行动: 浏览以查看使用AWS服务还有哪些其他功能 看穿
因为我是气流的新手,所以我不知道如何继续。请协助。简短回答:您可以使用检测某个密钥何时出现在S3存储桶中,然后使用获取密钥的内容 假设您完全不熟悉气流,我建议:
- 从
- 仔细阅读,然后
- 用作您自己的DAG的起点
- 浏览以查看使用AWS服务还有哪些其他功能
- 看穿