Google bigquery 数据流管道失败-“;“未知”;

Google bigquery 数据流管道失败-“;“未知”;,google-bigquery,google-cloud-dataflow,Google Bigquery,Google Cloud Dataflow,我们的一个数据流管道在尝试写入BigQuery时失败,出现以下错误(“未知”) 关于哪里出了问题有什么想法吗 id:2015-12-03-08-15-6773615943090215874 Dec 4, 2015, 5:29:40 AM S41: (83c82aae36b3b348): Workflow failed. Causes: (83c82aae36b3bcd7): BigQuery import job "dataflow_job_6773615943090212934" failed

我们的一个数据流管道在尝试写入BigQuery时失败,出现以下错误(“未知”)

关于哪里出了问题有什么想法吗

id:2015-12-03-08-15-6773615943090215874

Dec 4, 2015, 5:29:40 AM
S41: (83c82aae36b3b348): Workflow failed. Causes: (83c82aae36b3bcd7): BigQuery import job "dataflow_job_6773615943090212934" failed. Causes: (83c82aae36b3b666): BigQuery getting job "dataflow_job_6773615943090212934" in project "<removed>" failed. Causes: (83c82aae36b3bff5): BigQuery execution failed. caused by: (83c82aae36b3b984): Unknown error.
2015年12月4日上午5:29:40
S41:(83C82AAE36B348):工作流失败。原因:(83c82aae36b3bcd7):BigQuery导入作业“dataflow_作业”6773615943090212934失败。原因:(83c82aae36b3b666):BigQuery获取项目“”中的作业“数据流”作业“6773615943090212934”失败。原因:(83c82aae36b3bff5):BigQuery执行失败。原因:(83c82aae36b3b984):未知错误。

此故障是由于根据BigQuery返回的故障代码提前删除文件而导致的。与此类似,我们正在积极寻求解决方案


更新:此问题现已修复。

快速注意:“拒绝拆分”消息不是错误(它是动态工作重新平衡的常规部分),与作业失败无关,作业失败最终是由BigQuery导入失败引起的。@jkff-谢谢,更新后反映现在查看它,感谢您的耐心。我们已经注意到,在我们所有的管道上,将作业导入到BigQuery所花费的时间比平时长得多。另一个例子:2015-12-03_15_23_32-2105010438944471895对于第一个问题,我们跟踪到一个错误处理错误。目前正在研究更普遍的经济放缓。