Amazon web services 复制大量文件时,红移复制会在5小时后中止
我正在尝试使用一个copy命令将我的所有日志(大约2000个文件)上传到redshift。CPU峰值达到50%,持续运行5小时,然后停止。红移AWS控制台上未显示错误;stl_加载_错误中没有错误。磁盘使用率从2%激增到30%。我在这方面浪费了很多天。最终,我们可以通过将日志文件的数量划分为更小的块来解决这个问题。。每个区块大约有50个文件..磁盘空间的百分比也没有释放。。即使在满载后,磁盘使用率也只有10%Amazon web services 复制大量文件时,红移复制会在5小时后中止,amazon-web-services,amazon-redshift,Amazon Web Services,Amazon Redshift,我正在尝试使用一个copy命令将我的所有日志(大约2000个文件)上传到redshift。CPU峰值达到50%,持续运行5小时,然后停止。红移AWS控制台上未显示错误;stl_加载_错误中没有错误。磁盘使用率从2%激增到30%。我在这方面浪费了很多天。最终,我们可以通过将日志文件的数量划分为更小的块来解决这个问题。。每个区块大约有50个文件..磁盘空间的百分比也没有释放。。即使在满载后,磁盘使用率也只有10%