Warning: file_get_contents(/data/phpspider/zhask/data//catemap/1/amazon-web-services/14.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Amazon web services 使用数据管道将一个s3存储桶中的特定数据复制到另一个存储桶_Amazon Web Services_Amazon S3_Amazon Data Pipeline - Fatal编程技术网

Amazon web services 使用数据管道将一个s3存储桶中的特定数据复制到另一个存储桶

Amazon web services 使用数据管道将一个s3存储桶中的特定数据复制到另一个存储桶,amazon-web-services,amazon-s3,amazon-data-pipeline,Amazon Web Services,Amazon S3,Amazon Data Pipeline,我已经在aws s3 bucket中上传了一个JSON文件,因为JSON文件是键和值的形式,所以我只想使用aws数据管道将特定的键数据复制到其他s3 bucket中。要执行此操作,我应该在管道定义中添加什么。任何一个有线索的人都是值得欣赏的。谢谢 数据管道可以通过其ShellCommandActivity运行任何类型的shell脚本: 因此,您可以设置一个shell活动,该活动将从s3中提取数据(通过使用“stage”功能),运行一些自定义脚本,并将数据推回到s3

我已经在aws s3 bucket中上传了一个JSON文件,因为JSON文件是键和值的形式,所以我只想使用aws数据管道将特定的键数据复制到其他s3 bucket中。要执行此操作,我应该在管道定义中添加什么。任何一个有线索的人都是值得欣赏的。谢谢

数据管道可以通过其ShellCommandActivity运行任何类型的shell脚本:

因此,您可以设置一个shell活动,该活动将从s3中提取数据(通过使用“stage”功能),运行一些自定义脚本,并将数据推回到s3