google-bigquery - 来自 BQ 的 Apache 超集中的数据流？

Question

我是超集的新手，想知道是否有任何方法可以使用 apache 超集在大查询中执行数据流？目前，我已经使用大查询在 apache 超集中设置了数据库，但是当我在 bigquery 中使用 SQL 命令更新表数据时，它不会反映在超集中。有没有办法让数据流到超集？

Answer 1

我查看了 Apache Superset文档，找不到与源中的“流数据”相关的任何内容，我认为在这种情况下正在发生的事情是，您有一个仪表板，它使用您拥有的表中的数据BigQuery，在向表中添加一些新信息后，您希望该更改会自动反映在仪表板中。

基于此，我的理论是 Superset 将您的查询结果保存在内存中，或者它可能使用 BigQuery缓存的结果，这可能不允许仪表板自动更新数据并查看所做的更改。我的建议是再次为您的表运行查询以尝试获取最新数据。另一方面，如果 Superset 使用缓存结果，您将不得不查看用于 BigQuery 的 Superset 的配置，寻找禁用它的方法。