Amazon web services 使用s3 dist cp减少文件大小(--targetSize不起作用)

Amazon web services 使用s3 dist cp减少文件大小(--targetSize不起作用),amazon-web-services,amazon-s3,emr,amazon-emr,s3distcp,Amazon Web Services,Amazon S3,Emr,Amazon Emr,S3distcp,我正在AWS EMR(AMI 5.2)上运行一个作业。我在S3中有一些大文件,我想使用s3distcp将它们复制并拆分到另一个S3位置。以下是我正在使用的命令: s3-dist-cp --src=s3://my-bucket/dir1/ --dest=s3://my-bucket/dir2/ --groupBy='(.*)' --targetSize=2 我没有收到任何错误,分组似乎工作正常(即使在使用其他正则表达式时)。但是,目标大小调整不起任何作用。文件只是被复制到目标,而不是被拆分。本例

我正在AWS EMR(AMI 5.2)上运行一个作业。我在S3中有一些大文件,我想使用
s3distcp
将它们复制并拆分到另一个S3位置。以下是我正在使用的命令:

s3-dist-cp --src=s3://my-bucket/dir1/ --dest=s3://my-bucket/dir2/ --groupBy='(.*)' --targetSize=2
我没有收到任何错误,分组似乎工作正常(即使在使用其他正则表达式时)。但是,目标大小调整不起任何作用。文件只是被复制到目标,而不是被拆分。本例中的源文件为50MB