问题标签 [azure-purview]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
91 浏览

azure-purview - 我可以在一个 Azure Purview 帐户中注册多个租户吗?

我想在同一个权限帐户上注册多个租户。这可能吗?

0 投票
1 回答
106 浏览

azure-purview - Azure Purview 是否支持列级沿袭?

我们正在探索 Azure Purview,想知道 Azure Purview 是否支持列级沿袭?

0 投票
1 回答
4064 浏览

azure-data-catalog - Azure 数据目录和 Azure 权限之间有什么区别

我记得 Azure 数据目录 V2 即将发布,它具有数据沿袭功能,但我可以看到最近引入了与 Purview 相同的服务。您能否说明差异以及何时选择这些服务?

0 投票
1 回答
557 浏览

azure - Azure Purview 支持 ADF 数据流中的 Delta 格式接收器

我最近在探索 Azure 权限,并试图将沿袭信息从 ADF 推送到 Azure 权限。但是,似乎当我们使用 ADF 中的数据流(这是数据流的内联格式)以 Delta 格式接收数据时,它不会捕获沿袭信息。然而,它在使用“Parquet”格式的“数据集”下沉时捕获沿袭信息。是我在这里遗漏了一些东西还是它的错误或需要解决的功能?

0 投票
2 回答
205 浏览

azure - Purview 是否支持 ADF 数据流的内联数据集的沿袭信息?

我最近在探索 Azure 权限,并试图将沿袭信息从 ADF 推送到 Azure 权限。但是,似乎当我们使用 ADF 中的数据流(这是数据流的内联格式)以 Delta 格式接收数据时,它不会捕获沿袭信息。然而,它在使用“Parquet”格式的“数据集”下沉时捕获沿袭信息。是我在这里遗漏了一些东西还是它的错误或需要解决的功能?

我想我们需要在这里进行一些优化。

0 投票
1 回答
117 浏览

azure - Purview 是否显示 ADF 管道通过数据流自动创建的表的沿袭?

我已经调试了我的 ADF 管道,该管道包含 4 个复制活动和两个数据流。调试完成后,我切换到 Azure Purview 来查看对 Datafactory 所做的更改,并且能够看到 Pipeline。但是,当我进入 Azure Purview 中的管道时,所有活动和数据流都会出现沿袭,除了一个数据流。此数据流沉入一个不存在的 SQL 表中,因此它会自动创建该表。这就是它没有出现在权限范围内的原因吗?

0 投票
0 回答
117 浏览

azure - Azure Purview 无法对 Azure 数据资源管理器数据库进行分类

我遵循使用 Azure Purview 扫描 ADX 资产的文档,创建了具有所有必需权限的活动连接,并触发了扫描。扫描成功,但未识别出任何资产(表、列等)。我尝试使用默认和自定义扫描规则集进行多次扫描,但没有。

使用命令:“.show commands”,我可以看到 Purview 成功地向 ADX 提交了命令“ .show database details | project TotalSize, RetentionPolicy, CachingPolicy”

在此处输入图像描述

但仍然没有在数据目录中创建资产。

在此处输入图像描述

我不知道下一步该怎么做才能尝试找到问题。

0 投票
0 回答
77 浏览

azure - 为什么调试后所有数据流都没有出现在权限范围内?

我在 Azure Datafactory 中有一个管道,它链接到 Azure 权限以监视更改。一旦我调试了管道,复制活动和数据流就会出现在 Azure 权限中。现在我稍微改变了数据流并运行管道。但是现在只有 Copy 活动在 Purview 中更新,而在 Dataflow 中没有更新。谁能解释一下为什么??:/

0 投票
1 回答
297 浏览

azure - Azure Purview 的 ODBC 连接

Azure Data Catalog gen1 允许我们通过使用 ODBC 连接从 Databricks 工作区中的表中获取元数据。我们是否也有 Azure Purview 的 ODBC 连接?如果是这样,有人可以分享详细信息吗?

0 投票
1 回答
812 浏览

azure-data-factory - 当同一源上有多个复制数据活动时,Azure Purview 如何在 Azure 数据工厂中执行数据沿袭?

我的特殊情况是这样的: 数据工厂管道

我在 Azure Blob 存储中有一个 .txt 文件。

  1. 我将 Blob 中的这个文件复制到 Azure SQLDB
  2. 我将同一个文件复制到同一个 blob 容器中的存档位置
  3. 然后我在存档后删除文件

当我在 Azure 数据工厂中触发管道时,Purview 给了我一个仅显示存档复制活动的数据沿袭,而从未将 BLOB 显示到 Azure SQLDB 活动。有关血统,请参阅此屏幕截图:Purview Data Lineage

当我导航到 Purview 中的 Azure SQLDB 目标时,它说没有可用于此资产的数据沿袭。

这是我所做或认为可能是原因的原因:

  1. 也许复制活动需要在不同的管道中。我对此进行了测试,并发生了相同的结果
  2. 可能是因为我删除了文件,它没有将 Blob 源拾取到 Azure SQLDB 复制活动。我将对此进行测试,但我认为这不太可能,因为它确实将 Blob Source 提取到 Blob Archive Destination 复制活动
  3. 也许它只获取给定源的最后一个复制活动,而不是全部。我对此进行了测试,但它并没有改变数据沿袭。我可能需要在 Azure Purview 中做一些事情来“重置”数据沿袭,但我认为它使用源的最后一个管道运行,我注意到当我将管道分成 2 个管道时它确实更新了数据沿袭(一个用于加载 Azure SQLDB,另一个用于归档 Blob 文件)

我相当坚持这个......我将完全删除存档并看看会发生什么,但根据所有 Microsoft 文档,支持 Azure Blob 和 Azure SQLDB 的数据沿袭,所以这应该可以工作。如果有人有答案或想法,我很想听听。

更新** 我的最新理论是,在运行管道和在 Purview 中刷新数据沿袭之间存在时间差……我将尝试断开数据工厂并重新连接。

更新 #2** 据我所知,删除数据工厂连接并重新连接没有任何作用。我一直在研究如何通过 REST API 删除资产,这显然是在 Purview 中删除资产/关系的唯一方法……我认为下一步将是删除 Purview 帐户和存储。

更新 #3*** 即使在启动新的 Purview 帐户后,沿袭仍然无法将 Blob 显示到 Azure SQLDB。我想知道这是否是因为我拥有的 for each 逻辑,但没有意义,因为归档复制活动也在 for each 中。我不知所措。我有其他从 Blob 复制到 Azure SQLDB 的活动,但不是这个。

谢谢