数据流作业失败 - 未找到 BigQuery 导入作业

Question

我们的另一个管道失败了。似乎无法再次写入 BigQuery。

id: 2015-12-04_08_01_48-5133681620861162960

这是我们在从 BigQuery 读取或写入时失败的第三个管道。目前有问题吗？

Workflow failed. Causes: (9e23278dca02e8a7): BigQuery import job "dataflow_job_5133681620861162507" failed. Causes: (9e23278dca02ee74): BigQuery creation of import job for table "events_2015_12_05_denormalized" in dataset "PROJECT_MALBEC_DENORMALIZATION" in project "<removed>" failed. Causes: (9e23278dca02e441): Error:
 Message: Not found: Job roy-morgan-ua-model:dataflow_job_5133681620861162507
 HTTP Code: 404

Answer 1

这是 Dataflow 在超时后重试 BigQuery 作业时的一个已知问题。我们正在积极进行修复。

数据流作业失败 - 未找到 BigQuery 导入作业

Dataflow job failed - BigQuery import job not found

google-bigquery

google-cloud-dataflow