问题标签 [bigquery-public-datasets]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
937 浏览

heroku - API.AI 访问 google BigQuery 公共数据集

我想从 Heroku 上的 python 访问 google BigQuery 公共数据集

示例 - 莎士比亚 https://bigquery.cloud.google.com/table/bigquery-public-data:samples.shakespeare

基本上在下面的示例中,我想访问莎士比亚数据集而不是雅虎天气 api

https://github.com/api-ai/apiai-weather-webhook-sa​​mple

我可以仅使用我生成的 API_KEY 作为其公共数据集来访问它还是需要 OAuth 身份验证?

https://support.google.com/cloud/answer/6158857?hl=en

根据上面的链接,我可以看到“如果您只调用不需要用户数据的 API,例如 Google 自定义搜索 API,那么 API 密钥可能比 OAuth 2.0 访问令牌更易于使用。”

我在 GAE 中尝试了许多变体,并面临项目 id 为空的问题,因此现在要在 Heroku 中尝试,但想知道我是否只需要我在谷歌云控制台中生成的 API_KEY 或者我需要 OAuth,因为他们需要关联为计费目的查询项目?我已经在 Heroku 上实现了 yahoo 天气 api 示例,它可以工作,但需要用对 BigQuery 公共数据集的调用替换对 yahoo 天气的调用。

0 投票
3 回答
556 浏览

google-bigquery - 某些 bigquery 公共数据集是否不再可用?

使用 BigQuery GUI 界面时,我无法再浏览bigquery-public-data.stackoverflow数据集。它没有显示在公共数据集下拉列表中,我之前可以在其中查看架构。另一方面,我可以查询表格。

是否从 GUI 中删除了一些公共数据集?

0 投票
2 回答
713 浏览

google-bigquery - 使用 BigQuery 公共数据集分离标签以用于 stackoverflow

Google 为 Stackoverflow 的内容提供了一个公共数据集。我们可以在这里阅读。当我登录 GCP Cloud Console 并访问 BigQuery 页面并提交以下查询时:

显示给我的结果表将标签字段显示为串联项目。

在此处输入图像描述

如果我查看 JSON,我似乎看到了相同的结果:

在此处输入图像描述

我的假设是标签将由“|”分隔 字符,但数据似乎显示不同。我希望能更好地理解这一点。我的最终目标是执行查询以查找包含给定标签的所有问题。

0 投票
2 回答
118 浏览

sql - 谷歌公开专利数据 SQL (BigQuery)

我正在尝试通过 Google 公共专利数据中的 SQL 检索特定的 cpc 代码和受让人。我正在尝试搜索术语“大众”和 cpc.code “H01M8”。

但我得到了错误:

参数类型的运算符 = 没有匹配的签名:ARRAY <STRUCT<name STRING, country_code STRING>>, STRING。支持的签名:ANY = ANY at [15:3]

代码:

我也有兴趣搜索多个受让人,例如:

in ("VOLKSWAGEN", "PORSCHE", "AUDI", "SCANIA", "SKODA", "MAZDA", "TOYOTA", "HONDA", "BOSCH", "KYOCERA", "PANASONIC", "TOTO", "NISSAN", "LG FUEL CELL SYSTEMS", "SONY", "HYUNDAI", "SUZUKI", "PLUG POWER", "SFC ENERGY", "BALLARD", "KIA MOTORS", "SIEMENS", "KAWASAKI", "BAYERISCHE MOTORENWERKE", "HYDROGENICS", "POWERCELL SWEDEN", "ELRINGKLINGER", "PROTON MOTOR")

我最近开始使用 SQL 并没有看到错误:/

非常感谢您的帮助!

0 投票
1 回答
145 浏览

google-bigquery - 如何在 BigQuery 上删除项目并添加 bigquery-public-data 项目?

我已经在 Google BigQuery 控制台上有了一些项目。我需要删除它们并为我的练习添加一个 bigquery-public-data 数据集。我还在 Coursera 上学习数据分析。预先感谢您的支持。

0 投票
1 回答
55 浏览

sql - 如何在 ga4_obfuscated_sample_ecommerce 公共数据集中查找非活动用户

我最近开始使用 GCP,并且正在学习如何使用公共数据集。

我正在尝试使用 SQL 识别 N 天的非活动用户。

您可以在此处找到数据集:https ://developers.google.com/analytics/bigquery/web-ecommerce-demo-dataset

通过文档我发现了以下代码。

但是,当用 user_pseudo_id 替换 user_id、用 bigquery-public-data.ga4_obfuscated_sample_ecommerce 替换 YOUR_TABLE 值并更正日期时,我没有得到任何结果。

有没有办法将此代码应用于示例数据集?

0 投票
0 回答
41 浏览

database - 是否有一个公共数据库包含诸如 mobile.de 或 autoscout24 等二手车网站的条目?

对于一些统计分析,我正在寻找包含品牌、品牌、里程、年龄和价格的二手车数据集。

不幸的是,像 mobile.de 或 autoscout24.de 这样的网站只提供当前数据,也就是说,不可能检查某个品牌的价格变化和随着时间的推移——比如说几年。

到目前为止,我已经检查了archive.org,但是 - 正如预期的那样 - 我只能获取爬网页面,通常是入口页面。

我希望一些免费的数据爱好者能够获取这些二手车网站之一的数据——我试图通过谷歌或种子搜索引擎找到这样的集合,但到目前为止还没有运气。

细化标题中的问题:是否有一个公共数据库包含二手车网站(如 mobile.de 或 autoscout24)的条目,我在哪里可以找到它?

0 投票
1 回答
48 浏览

sql - SQL查询中不必要的空白行

目的是编写一个 SQL 查询以从公共数据库返回乘车详细信息。

在学习数据分析课程时,我偶然发现了这个问题。使用的代码是正确的,因为提供的指令是相同的,但是我得到的结果是不同的。第一行返回一个空白行,其中仅包含提到的旅行次数。

1

这是我使用的代码

0 投票
1 回答
33 浏览

sql - 为什么在运行第二个代码时出现错误

我正在使用 Google Bigquery 从公共数据集 new_york_citibike 中查询数据。我想获得可用的 num_bikes 和 station_id 上可用的平均自行车数。查询是:

第二个查询是:

我得到的错误是“ SELECT list expression references column num_bikes_available which is not grouped not aggregated ”。 为什么在第二种情况下我必须聚合 num_bikes_available 。