Google bigquery bq加载失败,连接错误,仍上载数据

Google bigquery bq加载失败,连接错误,仍上载数据,google-bigquery,Google Bigquery,我们有一个脚本,可以使用bq上传JSON换行符分隔的数据bq加载操作中说出BigQuery错误失败:连接错误。请再试一次。。我们的脚本重试了5次,直到成功。不幸的是,数据上传了5次。这一次来自约旦: 在bq工具中有一个鲜为人知的标志来防止双重上传 (如果您将其用于导入)。如果您使用“-fingerprint\u job\u id” 它将使用一个作业id,该id基于您正在创建的文件名的散列 如果您尝试加载,则加载将失败,并出现“已存在”错误 再运行一次 如果您不使用bq工具,您可以设置一个手动作业

我们有一个脚本,可以使用
bq
上传JSON换行符分隔的数据
bq
加载操作中说出
BigQuery错误失败:连接错误。请再试一次。
。我们的脚本重试了5次,直到成功。不幸的是,数据上传了5次。

这一次来自约旦:

在bq工具中有一个鲜为人知的标志来防止双重上传 (如果您将其用于导入)。如果您使用“-fingerprint\u job\u id” 它将使用一个作业id,该id基于您正在创建的文件名的散列 如果您尝试加载,则加载将失败,并出现“已存在”错误 再运行一次

如果您不使用bq工具,您可以设置一个手动作业id,以防止同一作业像本例中那样运行两次

如果在同一个表中添加了5次相同的数据,并且希望返回到以前的表,那么表装饰器可以提供帮助。你可以在过去7天内回到任何州。看