google-bigquery - bq 加载错误“无法将值转换为字符串”

Question

我尝试通过 bq 命令将日志从 Google Cloud Storage 加载到 BigQuery，但出现此错误“无法将值转换为字符串”。

我的示例数据

{"ids":"1234,5678"}
{"ids":1234}

我的示例架构

[
    { "name":"ids", "type":"string" }
]

似乎 ID 无法通过单个 ID 的无引号进行转换。数据是用fluent-plugin-s3做的，但是多个用逗号连接的ID可以用引号绑定，不能做单个ID。

如何将这些数据加载到 BigQuery？

提前致谢

Answer 1

好吧，检查一下可以帮助你的不同流利的插件，也许

• https://github.com/lob/fluent-plugin-json-transform
• https://github.com/tarom/fluent-plugin-typecast