Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/amazon-s3/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Amazon s3 如何将大量数据从AWS S3自动备份到Microsoft Azure_Amazon S3_Azure Storage - Fatal编程技术网

Amazon s3 如何将大量数据从AWS S3自动备份到Microsoft Azure

Amazon s3 如何将大量数据从AWS S3自动备份到Microsoft Azure,amazon-s3,azure-storage,Amazon S3,Azure Storage,我们使用AWS S3来存储和服务我们的内容。我们希望将该数据备份到Microsoft Azure存档存储。我试图找到一个关于如何实现这一点的教程,但我找到的一些答案与过期的资源有关 我们已经拥有超过30 TB的存储容量,并且我们正在每隔几天增加大约1 TB的存储容量,将来可能每天超过1 TB 我们如何以这种规模自动化从S3到Azure的数据复制?有两种可能的方法:将数据从S3传输到Azure存储:使用Azure data factory,可以在此处找到完整的文档: “支持的能力 您可以将数据复制

我们使用AWS S3来存储和服务我们的内容。我们希望将该数据备份到Microsoft Azure存档存储。我试图找到一个关于如何实现这一点的教程,但我找到的一些答案与过期的资源有关

我们已经拥有超过30 TB的存储容量,并且我们正在每隔几天增加大约1 TB的存储容量,将来可能每天超过1 TB


我们如何以这种规模自动化从S3到Azure的数据复制?

有两种可能的方法:将数据从S3传输到Azure存储:使用Azure data factory,可以在此处找到完整的文档:

“支持的能力 您可以将数据复制到任何受支持的接收器数据存储。有关复制活动支持作为源或接收器的数据存储列表,请参阅支持的数据存储表。 具体而言,此Amazon S3连接器支持按原样复制文件或使用支持的文件格式和压缩编解码器解析文件。”

或者您可以使用AzureCopy:(不是Microsoft产品) 因为您提到了这是一个大量的数据,所以第一个选项可能是最好的。
您可能还需要在传输时手动将访问层切换到存档。

谢谢!我将尝试使用Azure Data Factory连接器连接S3。Mircea,如果它对您有帮助,请您标记为答案好吗?这将使其与所有社区相关:)