1

最终目标:将 csv 文件内容从谷歌云存储桶传输到 BigQuery 数据集中的表。

问题:数据传输似乎正在工作,没有显示任何错误/警告,但数据无法到达目标表。

  • 预先创建的数据集/表
  • bkt 创建并上传了一个 csv 文件
  • 数据传输创建并配置为将所有文件从上述存储桶传输到我的目标表。
  • 传输是按需定义的。

我是 bigQuery 和 GCP 的新手,但数据传输的想法对我来说似乎很直观。我假设我在这里遗漏了一些东西,但流程没有通知我。所以我认为这可能是权限(我有 bigQuery 管理员角色等等..)我认为它是一个位置/区域的东西,但所有资源都在欧盟..

你能帮我理解我还缺少什么吗?附上一些可能有帮助的图片。

存储桶配置(我的 csv 所在的位置)

目的地表详细信息

传输配置

显示成功操作的数据传输输出

提前致谢。

4

2 回答 2

0

不确定出了什么问题,因为没有返回错误,但在这种情况下我通常会检查两点:

  • 您是否尝试重新加载 BigQuery 工作区?它不会自动刷新,因此您必须重新加载才能看到更改(如果有的话..)

  • 您是否尝试过直接从工作区加载 csv(在 UI 中从云存储创建表),而不设置数据传输?这样,如果您的文件有问题,您可以立即检查

于 2021-04-06T15:01:50.660 回答
0

请在您的 ID 上至少拥有“ BigQuery Data Editor ”角色来解决您的问题。

于 2021-04-06T18:47:06.673 回答