Google cloud storage 运行无限时间的gsutil rsync进程

Google cloud storage 运行无限时间的gsutil rsync进程,google-cloud-storage,gsutil,Google Cloud Storage,Gsutil,我正在使用gsutil命令行工具。我使用的是'gsutil-mrsync-。源是AmazonS3路径,目标是Google存储。我正在通过crontab运行shell脚本调度。在上传S3和GS路径之前,我将从GS中删除所有数据。 对于许多cronjobs,我可以看到他们处于等待状态超过一周/月。作业正在发送警告消息,表示无法检查下载的数据的完整性,然后等待无限长的时间。是否存在与此gsutil“rsync”相关的错误。 gsutil版本:4.9我在从本地fs同步到gs时看到类似的问题。当我在等待了

我正在使用gsutil命令行工具。我使用的是'gsutil-mrsync-。源是AmazonS3路径,目标是Google存储。我正在通过crontab运行shell脚本调度。在上传S3和GS路径之前,我将从GS中删除所有数据。 对于许多cronjobs,我可以看到他们处于等待状态超过一周/月。作业正在发送警告消息,表示无法检查下载的数据的完整性,然后等待无限长的时间。是否存在与此gsutil“rsync”相关的错误。
gsutil版本:4.9

我在从本地fs同步到gs时看到类似的问题。当我在等待了很长一段时间之后控制C时,我可以看到并非所有由该进程启动的python线程都已死亡。我必须杀-9个。是的,詹姆斯,我也面临同样的问题。我已经向谷歌的gs团队报告了这个问题。希望他们能在下一个版本中提出解决方案。我认为在我的例子中,它与FIFO或套接字有关,而FIFO或套接字恰好在这条道路上。我需要更多的测试。