Amazon s3 限制';ls';s3fs中的命令输出
我的AmazonS3存储桶有数百万个文件,我正在使用Amazon s3 限制';ls';s3fs中的命令输出,amazon-s3,s3fs,Amazon S3,S3fs,我的AmazonS3存储桶有数百万个文件,我正在使用s3fs挂载它。只要发出ls命令(并非有意),终端就会挂起 当在s3fs装载路径中发出ls命令时,是否有办法将返回的结果数限制为100?不建议在生产情况下使用s3fs。AmazonS3不是一个文件系统,因此尝试挂载它可能会导致一些同步问题(以及您遇到的其他问题) 最好使用,它有命令列出、复制和同步AmazonS3中的文件。它还可以按路径部分列出S3存储桶。试试goofys()。它没有限制ls返回的项目数量,但是当有大量文件时,ls比s3fs快约
s3fs
挂载它。只要发出ls
命令(并非有意),终端就会挂起
当在
s3fs
装载路径中发出ls
命令时,是否有办法将返回的结果数限制为100?不建议在生产情况下使用s3fs
。AmazonS3不是一个文件系统,因此尝试挂载它可能会导致一些同步问题(以及您遇到的其他问题)
最好使用,它有命令列出、复制和同步AmazonS3中的文件。它还可以按路径部分列出S3存储桶。试试goofys()。它没有限制ls返回的项目数量,但是当有大量文件时,
ls
比s3fs快约40倍。s3fs的最新版本包括改进ls的优化,但它仍然为每个文件发出一个HEAD请求。goofys避免了这一成本,而且速度更快。