Google cloud storage 对返回的文件的限制

Google cloud storage 对返回的文件的限制,google-cloud-storage,gsutil,Google Cloud Storage,Gsutil,我需要在谷歌云存储中保存几千个文件。gsutil ls命令返回的文件数量是否有限制 如果我没有错的话,AWS S3服务的限制是每次请求都显示几千条条目。如果我需要列出下一批,我需要使用API或使用一些复杂的sript 我想知道在使用gsutil命令行工具时是否有这样的限制。我可以自己检查,但我必须上传数千个虚拟文件 gsutil ls命令通过bucket listings分页-每个底层GET返回有限数量的结果(通常为1000),gsutil将不断迭代所有批处理,直到它列出bucket中的所有对象

我需要在谷歌云存储中保存几千个文件。gsutil ls命令返回的文件数量是否有限制

如果我没有错的话,AWS S3服务的限制是每次请求都显示几千条条目。如果我需要列出下一批,我需要使用API或使用一些复杂的sript


我想知道在使用gsutil命令行工具时是否有这样的限制。我可以自己检查,但我必须上传数千个虚拟文件

gsutil ls命令通过bucket listings分页-每个底层GET返回有限数量的结果(通常为1000),gsutil将不断迭代所有批处理,直到它列出bucket中的所有对象

请注意,如果您计划构建一个大型对象集合(例如,数十万或数百万),我们建议您不要依赖使用bucket列表来跟踪对象,而是维护自己的元数据(例如,在列出所有对象名称和相关详细信息的数据库中)

迈克·施瓦茨, 谷歌云存储团队