BigQuery - 数据传输成功但目标 table 保持为空
BigQuery - data transfer success but destination table stays empty
最终目标:将 csv 文件内容从 google 云存储桶传输到 BigQuery 数据集中的 table。
问题: 数据传输似乎在工作,没有显示任何 errors/warnings 但数据无法到达目的地 table.
- dataset/table 预先创建
- 创建了 bkt 并上传了一个 csv 文件
- 数据传输已创建并配置为将所有文件从上述存储桶传输到我的目的地 table。
- 传输是按需定义的。
我是 bigQuery 和 GCP 的新手,但数据传输的想法对我来说似乎非常直观。
我想我在这里遗漏了一些东西,但流程没有通知我。
所以我认为这可能是权限(我有 bigQuery Admin 角色等等......)
我认为这是 location/region 的事情,但所有资源都在欧盟..
你能帮我理解我还缺少什么吗?
附上一些可能有帮助的图片。
Bucket Configuration (where my csv resides)
Destination Table details
Transfer Configuration
Data Transfer output showing a successful action
提前致谢。
不确定哪里出了问题,因为没有返回错误,但我通常会在这种情况下检查两点:
您是否尝试重新加载 BigQuery 工作区?它不会自动刷新,因此您必须重新加载才能看到更改(如果有的话..)
您是否尝试过直接从工作区加载 csv(从 UI 中的云存储创建 Table),而不设置数据传输?这样您就可以立即检查您的文件是否有问题
请在您的 ID 上至少拥有“BigQuery Data Editor”角色以解决您的问题。
最终目标:将 csv 文件内容从 google 云存储桶传输到 BigQuery 数据集中的 table。
问题: 数据传输似乎在工作,没有显示任何 errors/warnings 但数据无法到达目的地 table.
- dataset/table 预先创建
- 创建了 bkt 并上传了一个 csv 文件
- 数据传输已创建并配置为将所有文件从上述存储桶传输到我的目的地 table。
- 传输是按需定义的。
我是 bigQuery 和 GCP 的新手,但数据传输的想法对我来说似乎非常直观。 我想我在这里遗漏了一些东西,但流程没有通知我。 所以我认为这可能是权限(我有 bigQuery Admin 角色等等......) 我认为这是 location/region 的事情,但所有资源都在欧盟..
你能帮我理解我还缺少什么吗? 附上一些可能有帮助的图片。
Bucket Configuration (where my csv resides)
Destination Table details
Transfer Configuration
Data Transfer output showing a successful action
提前致谢。
不确定哪里出了问题,因为没有返回错误,但我通常会在这种情况下检查两点:
您是否尝试重新加载 BigQuery 工作区?它不会自动刷新,因此您必须重新加载才能看到更改(如果有的话..)
您是否尝试过直接从工作区加载 csv(从 UI 中的云存储创建 Table),而不设置数据传输?这样您就可以立即检查您的文件是否有问题
请在您的 ID 上至少拥有“BigQuery Data Editor”角色以解决您的问题。