google-bigquery - 是否可以从谷歌计算磁盘加载和导出到 BQ？

Question

如何从计算磁盘加载到 bigquery？这应该比从谷歌云存储加载更快吗？出口也是如此。非常感谢

Answer 1

听起来是个有趣的想法，但只有两种方法可以将数据加载到 BigQuery：

• GCS 中的 .csv 或 .json 文件（如您所述）。请注意，它们可以进行 gzip 压缩，以加快传输速度，而未压缩的文件将获得更快的处理时间。
• 或者通过 POST 请求将数据发送到 API。

正如您所提到的，将文件留在 GCS 中是大数据导入和导出的更快且推荐的方式。