Warning: file_get_contents(/data/phpspider/zhask/data//catemap/1/amazon-web-services/14.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Amazon ec2 提高AmazonEC2上的数据传输速率_Amazon Ec2_Amazon Web Services_Amazon Ebs - Fatal编程技术网

Amazon ec2 提高AmazonEC2上的数据传输速率

Amazon ec2 提高AmazonEC2上的数据传输速率,amazon-ec2,amazon-web-services,amazon-ebs,Amazon Ec2,Amazon Web Services,Amazon Ebs,我已经在EC2实例上安装了一个1G的EBS卷, 我正在从本地硬盘复制600MB的二进制数据(通过RDS连接) 复制过程窗口显示剩余10小时。 虽然我有一个高速连接(100+Mbps) 无论数据量是多少,数据传输速率都是1分钟/MB(即16Kbs/Sec) 我在工作站前阅读《白鲸记》还是休息一天之间犹豫不决 是否有任何合理的选项来加速此传输速率?(理想情况下至少为512 Kbps/Sec) 我非常愿意接受任何缩短上传/下载时间和EC2实例的解决方案 提前谢谢 编辑: 我刚刚偶然发现了[亚马逊进出口

我已经在EC2实例上安装了一个1G的EBS卷, 我正在从本地硬盘复制600MB的二进制数据(通过RDS连接) 复制过程窗口显示剩余10小时。 虽然我有一个高速连接(100+Mbps)

无论数据量是多少,数据传输速率都是1分钟/MB(即16Kbs/Sec)
我在工作站前阅读《白鲸记》还是休息一天之间犹豫不决

是否有任何合理的选项来加速此传输速率?
(理想情况下至少为512 Kbps/Sec)

我非常愿意接受任何缩短上传/下载时间和EC2实例的解决方案

提前谢谢

编辑:
我刚刚偶然发现了[亚马逊进出口服务][1] “AWS导入/导出加速了AWS云和您发送给我们的便携式存储设备之间的大量数据传输”
通过“发送给我们”,他们的字面意思是您将存储设备“实质性地”运送到亚马逊。
不要说这是Stoneage,这是全新的技术,伙计!:-)

EDIT2:

这听起来很棒:[Aspera for AWs][2],但不幸的是太贵了
专为需求量大、现金量大的《财富》500强量身定做。

有时候,如果你想做点什么,最好自己做:-)

我在网上没有发现任何令人满意的东西,所以我花了一个晚上做了一个相当完整的台架测试。 我已经测试了一些备选方案/场景,结果如下:

EC2上安装的FTP服务器是Filezilla服务器(正确的配置很敏感)
用于此台架测试的FTP客户端是WinSPC(Filezilla客户端不工作。请参阅
图例:[HC]表示家庭连接(100MBps)

上传带宽
RDS上传:15kb/S=>更糟
FTP上传[安装在EC2上的FTP服务器]:100 Kb/S
从AWS管理控制台从HC上传到S3:60 Kb/S
使用AWS控制台界面从EC2上传到S3:145 Kb/S
使用从HC上传到S3:120kb/S
使用EC2:2000 Kb/S上传到S3

下载带宽
RDS下载和上传:15kb/S=>更糟
FTP下载[安装在EC2上的FTP服务器]:360 Kb/S
从EC2的S3 AWS控制台界面下载:350 Kb/S
从S3下载,使用:从HC:380到620 Kb/S 从S3下载,使用:从EC2:3000 Kb/S

结论:

因此,到目前为止,AmazonS3与S3浏览器的结合提供了最好的结果。 (S3浏览器只是S3之上的一层,我不明白为什么上传速度更好)

但是,您应该记住,EC2实例上的FTP服务器具有将本地EC2目录直接映射到EC2的巨大优势。与S3不同,只涉及一次传输。。实际上,S3需要两次传输:从本地资源到S3/和从S3到EC2,反之亦然,而FTP访问则提供即时性通过缩短传输周期。此外,它还节省了S3存储桶的成本。

同样有趣的是,EC2实例的带宽非常强大,因此更有趣的是——不用说,使用真正利用它的协议,如S3或FTP,而不是RDS


我希望这将对其他面临同样问题的人有用,并为他们节省宝贵的时间。

使用Aspera或Tsunami UDP并将600 MB移动到您的Amazon EC2 infra(跳转框)。然后从jumpbox内部复制到windows ec2。我的基准测试表明,海啸UDP比传统模式快得多。

S3会是一个替代方案吗?我知道S3用于Web访问,这不是我的使用案例。但如果它提高了传输速率,并且可以从本地硬盘访问,为什么不呢。我发现:。我在欧洲,但我有在EBS Volume创建时,除了“美国东部”没有其他选择。“永远不要低估一辆满载磁带的旅行车在高速公路上疾驰的带宽。”-Tanenbaum,Andrew S.(1996)。计算机网络。新泽西州:普伦蒂斯大厅。第83页。ISBN 0-13-349945-6。至少他们没有要求你通过snail传输……没错,对于高容量来说,仍然没有什么比磁带更好的了。开始怀疑这些传输速率是有意为“批量”增加实例时间的用户。比其他提供商慢得多。我不愿意认为有任何切片或多路复用正在进行。(2.5年后,仍然很慢)。你确定速率只有2000 Kb/s->2Mb/s 256 Kb/s太低了。一定是有什么问题。我通过HTTPS获得的速率约为80 Mb/s(10 Mb/s)。