Google bigquery BigQuery数据传输不删除源

Google bigquery BigQuery数据传输不删除源,google-bigquery,Google Bigquery,我正在使用一个按需(作为自动化之前的测试)Bigquery数据传输作业,它将数据从存储加载到表中。 一切都很好,但我把“删除传输后的源文件”| “true”,并且在结束时不会删除任何文件。它们不会再次加载,但始终在我的存储文件夹中 这种删除是至关重要的,因为数据量可能在短时间内变得相当大。我可以用另一个程序把它们删除,但是转机服务会变得不那么有趣 作业本身不会抛出任何错误,这意味着某些东西正在悄悄地失败。你知道这可能是什么原因吗?或者我没有理解这个选项的含义 谢谢请确保您有足够的权限进行云存储传

我正在使用一个按需(作为自动化之前的测试)Bigquery数据传输作业,它将数据从存储加载到表中。 一切都很好,但我把“删除传输后的源文件”| “true”,并且在结束时不会删除任何文件。它们不会再次加载,但始终在我的存储文件夹中

这种删除是至关重要的,因为数据量可能在短时间内变得相当大。我可以用另一个程序把它们删除,但是转机服务会变得不那么有趣

作业本身不会抛出任何错误,这意味着某些东西正在悄悄地失败。你知道这可能是什么原因吗?或者我没有理解这个选项的含义


谢谢

请确保您有足够的权限进行云存储传输,它不会明确告诉您缺少哪些权限

所需权限

  • 大查询
    • bigquery.transfers.update
  • 云存储
    • storage.objects.get
    • storage.objects.list
    • storage.objects.delete

  • 此处的更多信息

    您是否已检查您是否拥有“storage.objects.delete”权限?也许您是对的,但至少会引发错误或异常。我可能还有另一个潜在客户:我可以创建按需作业,但我必须是管理员才能创建计划的转移作业。我将等待,然后找出是否缺少某些内容:)