Google cloud storage 如何将milions对象上载到google云存储

Google cloud storage 如何将milions对象上载到google云存储,google-cloud-storage,Google Cloud Storage,谷歌云存储API(XML或Json)只允许每秒上传1次 您最多可以每秒更新一次特定对象。以超过每秒一次的速度更新特定对象可能会导致503服务不可用错误。对不同对象的并发更新不受每秒更新一次的限制 那么,如何上传新的2000万Difference object谷歌存储 p/s:我的硬盘中有大约2000万个小文件,所以我想将所有文件上传到谷歌云存储。对不起,这句话有些误导。您可以每秒上载一次具有相同对象名称的特定对象。如果你有一个bucketfoo和一个objectbar,你应该每秒只上传一次新的

谷歌云存储API(XML或Json)只允许每秒上传1次

您最多可以每秒更新一次特定对象。以超过每秒一次的速度更新特定对象可能会导致503服务不可用错误。对不同对象的并发更新不受每秒更新一次的限制

那么,如何上传新的2000万Difference object谷歌存储


p/s:我的硬盘中有大约2000万个小文件,所以我想将所有文件上传到谷歌云存储。

对不起,这句话有些误导。您可以每秒上载一次具有相同对象名称的特定对象。如果你有一个bucket
foo
和一个object
bar
,你应该每秒只上传一次新的
foo/bar


你可以在带宽允许的情况下尽快上传具有不同名称的对象。

问题是,你是在更新一个对象2000万次还是在创建2000万个新对象?我的硬盘中有大约2000万个小文件,所以我想将所有文件上传到谷歌云存储。那么可能使用命令行工具……你确定吗?我使用hadoop(仅适用于mapper)来使用google存储,并且出现了一个ramdomly命中错误(后端错误-500服务器状态)是的,非常确定。500当然是可能的,但应该很少。你经常看到他们吗?