数据流作业挂起 - 没有给出警告或错误

Dataflow jobs hanging - no warnings or errors given

我们有一个从 BigQuery 读取数据的数据流管道。它正在尝试读取约 1000 万条记录。一切看起来都很健康——没有错误或警告。但是当试图从 BigQuery 中读取时,工作就挂起了。我们将其放置了 15 分钟,但仍读取了 0 条记录。最后我们不得不取消工作。

一些示例作业 ID

目前服务有问题吗?

这是从 BigQuery table 读取的权限问题。但是,错误在作业中是不可见的。当我们启用云日志记录时,作业失败并出现错误。 Google 工程师正在研究未启用云日志记录时作业挂起的原因,以及发生错误的原因。