我需要一个好的解决方案,最好是现有的解决方案,例如 Google Rest API,以便将数据流式传输/插入 BigQuery。由于许多设计原因,我不想使用 POST 方法发送数据。我预计每秒有 1000 次写入。数据将附加在 url 的查询参数中。它与谷歌分析非常相似,使用 Get 方法发送分析数据。
问问题
188 次
3 回答
0
这里有一份礼物:
http://dmitriilin.com/exporting-data-google-analytics-google-bigquery/ https://github.com/lnklnklnk/ga-bq
如果您有任何其他问题可以问我,我使用了这个解决方案。
于 2017-10-12T12:24:22.923 回答
0
我还可能鼓励您使用诸如 Dataflow 流式管道之类的东西来处理这些插入,而不是直接调用 API。
于 2017-10-13T20:59:03.010 回答
0
谷歌云功能(GCF)解决了这个问题。GCF 仍处于测试阶段,但大多数谷歌产品无论如何都处于测试阶段。GCF 是无服务器的,可以用几行代码编写 http 触发器。欲了解更多信息,请访问 -> https://console.cloud.google.com/functions
于 2017-10-31T10:05:42.290 回答