1

我能够在 Google Data Catalog 中发现 Bigquery 数据集、GCS 文件,但在 Cloud Data Catalog UI 中找不到 Cloud SQl 或 Cloud Spanner 选项。

是否可以在 Data Catalog 中查看 Cloud SQL 表、Cloud Spanner 表数据?如果是,请建议步骤或提供文档链接。

谢谢。

4

3 回答 3

1

是的,可以使用 Data Catalog自定义条目

要查看 Cloud SQL 表,您可以使用MySQL、SQL Server 和 PostgreSQL的开源连接器。

还要检查官方文档中的本地摄取用例。

本地摄取用例

于 2020-10-05T16:11:31.937 回答
0

不幸的是,Data Catalog、Cloud SQL 和 Cloud Spanner 之间没有原生集成。然而,有一个关于此功能的问题跟踪器报告。

正如您在共享链接中看到的那样,作为一种变通方法,您可以手动创建到 Spanner 的 JDBC 连接器,并按计划将元数据导出到 Data Catalog自定义条目。类似于 Mahendren 的建议。您可以使用 Cloud SQL 执行类似的操作

于 2020-09-30T14:33:06.503 回答
0

是的,这是可能的详细信息:除了原生元数据类型 GCS、PUB/SUB 和 BigQuery 之外,还需要通过 Catalog-API 处理

参考:https ://cloud.google.com/data-catalog/docs/how-to/custom-entries

即,使用 7 种语言中的一种以编程方式循环遍历来自自定义数据源(例如 BigTable)的所有表并动态创建标记。

我最喜欢的 Python 和 C#

如果其他人有更好的替代方法,将不胜感激

于 2020-09-29T18:41:48.047 回答