Google cloud platform 文件上载到bucket/云存储时自动启动加载到BigQuery

Google cloud platform 文件上载到bucket/云存储时自动启动加载到BigQuery,google-cloud-platform,google-bigquery,Google Cloud Platform,Google Bigquery,我们有一个脚本从另一个数据库导出csv文件,并将它们上传到GCP云存储上的一个存储桶中。现在我知道可以使用BigQuery数据传输服务将加载安排到BigQuery中,但我有点惊讶,似乎没有一个解决方案在文件上传完成时自动触发 我错过了什么吗?您可能需要自己处理该事件(google.storage.object.finalize) 例如,该事件可以触发一个云函数(),该函数可以执行各种操作—从触发加载作业,到在将文件中的数据加载到BigQuery表时执行复杂的数据处理(清理、验证、合并等)

我们有一个脚本从另一个数据库导出csv文件,并将它们上传到GCP云存储上的一个存储桶中。现在我知道可以使用BigQuery数据传输服务将加载安排到BigQuery中,但我有点惊讶,似乎没有一个解决方案在文件上传完成时自动触发


我错过了什么吗?

您可能需要自己处理该事件(
google.storage.object.finalize

例如,该事件可以触发一个云函数(),该函数可以执行各种操作—从触发加载作业,到在将文件中的数据加载到BigQuery表时执行复杂的数据处理(清理、验证、合并等)