问题标签 [azure-data-catalog]

我不使用数据库，所以想在开始之前确认最佳实践。我得到了一个项目，我应该在其中获取一些不同建模的数据文件，处理它们并显示一些标准报告。

这将是批量摄取，最多可以是每周或每天。我们将使用的云是 Microsoft Azure。根据我的开发经验，我正在考虑以下工具来完成这项工作。但是会喜欢你们的一些建议：

-> Ingestion [and stage] => 编写一个 rest api 来获取数据并在 Elastic 中暂存

-> 处理 -> Azure HDInsight .. 我没有使用它，但从简短的阅读来看，这听起来像是推荐的选择。

-> 暂存和报告 -> 使用 Kibana/Graphana 返回弹性搜索。我用过这些工具，所以更喜欢它。

我还阅读了一些推荐 Azure 数据工厂的文章。期待提出一些建议。

问候， Gaurav Sharma

我计划将 Azure 数据工厂用于 ETL 流程，我想知道 Azure 数据工厂是否使用数据目录中捕获的元模型。请指教

我正在使用 Azure 数据目录对我的数据进行编目。我在登录门户页面上有两个框，分别用于资产编号和用户编号。在我的门户网站上，这似乎在过去一周左右消失了。有谁知道我可以添加回这个吗？有设置选项吗？

提前谢谢了。

我们正在评估 Azure 数据目录是否能满足我们的需求，我们的问题之一是我们是否可以根据列标签搜索数据集。例如，如果我的一些数据集的其中一列具有列标签“xyz”，我是否可以搜索具有列标签“xyz”的所有数据集并获取所有具有带有标签的列（任何列）的数据集“xyz”？

此外，这可以通过 REST API 以编程方式完成吗？谢谢！

我想使用 API 从 Azure 数据目录中获取目录的名称。当我尝试使用以下命令从 Azure 数据目录中获取目录时

如链接https://docs.microsoft.com/en-us/rest/api/datacatalog/data-catalog-data-catalog中所述

它抛出以下错误

响应 [400]

看来我必须先进行身份验证。如何在获取目录之前进行身份验证？

我想制作一个逻辑应用程序，如果 Azure 数据目录因我们的一个订阅而出现故障，它将发送一封电子邮件。我知道我可以 ping 它，但想知道是否有内置触发器或操作来测试服务。

Azure 数据目录允许任何用户注册对象，除非声明他们不能

我们发现，在我们的 Active Directory 上但尚未添加到目录安全性的用户可以看到并成功使用“发布”按钮将他们自己的对象注册到目录中。

要删除此权限，您似乎必须将它们添加到“设置”中的“目录用户”，然后取消选中“注册”。然后，这会阻止他们注册对象以及查看目录中的“发布”按钮的能力。

我是否正确地说这是防止 AD 中的任何用户注册对象的方法？如果您没有被添加到您可以注册的目录中，但如果您被添加并且权限被删除，您就不能注册，这似乎是一种奇怪的安全方式。

我正在尝试使用客户端密钥向 Azure 数据目录发出 API 调用，但是我收到了 Permission denied 错误。

我能够创建令牌，并且在 AAD 中为客户端应用程序提供了必要的权限。

如果我将身份验证方法更改为使用用户登录的委托访问，它可以工作，但如果我尝试使用客户端密码，则生成的令牌没有适当的权限。

这是我使用各种示例更改的一些代码

此代码中的令牌有效

我收到此错误远程服务器返回错误：

(403) AccessDenied : 拒绝访问..

我的应用程序获得了一个令牌，并且可以像搜索一样对 ADC 进行 api 调用。但是新资产注册请求失败，因为“LastRegisterdBy”字段不能为空/空，并且必须与当前用户对应。但是，令牌不包含任何用户信息（AccessToken().Result.UserInfo.DisplayableId 为空）。

我主要遵循 MS 提供的入门入门项目（https://github.com/Azure-Samples/data-catalog-dotnet-get-started/blob/master/Program.cs）

但我用

AcquireTokenAsync(resourceUri, clientCredential).ConfigureAwait(false)

代替

AcquireTokenAsync(resourceUri, clientId, new Uri(redirectUri), new PlatformParameters(PromptBehavior.Always)).

这样就没有人必须输入他的凭据。目标是运行 ssis 包中的代码，它将每周执行一次以自动捕获数据中的任何更新。

这是我的代码大纲：

使用 upn = authResult.Result.UserInfo.DisplayableId; 我得到：

{"error":{"code":"InvalidPropertyValue","message":"属性之一的输入值无效。路径：'properties.lastRegisteredBy.upn'。详细信息：值不能为空、空或完全由空格。"}}

机智 upn = "test@user":

{"error":{"code":"InvalidLastRegisteredBy","message":"LastRegisteredBy 与当前用户不同。"}}

我正在使用访问其他 Azure API 的 ADAL.js 构建一个有角度的 Web 应用程序，并且我成功地访问了自定义 Web API、Power BI API 和 Graph API。不幸的是，我无法访问 Azure 数据目录，我像所有其他服务一样通过资源 URI 请求获取令牌。我已将用户和应用服务主体名称添加为目录用户，并且应用注册具有 Azure 数据目录委派访问权限。下面是我用来获取令牌的代码，然后我将它附加到标头，就像我为其他 API 所做的那样。这是唯一一个我在访问时遇到问题的 Azure API。如果有人能够提供帮助，请提前致谢。