azure - 执行后将管道活动记录到数据库

Question

目前，我们正在使用Visual Link监控 DataFlow Taks 如何实现日志分析和操作管理以获得所需的 Monitor pipeline runs 和 Monitor activity runs

使用 ADF - 需要活动运行信息插入到每个管道的数据库表中，可以创建 power bi 报告并使用我自己的图表和 kpi 与监控团队共享

请提供 Gitcode 或步骤以将 Monitor 管道/活动运行移动到数据库中。另外，有什么快速的方法可以将结果导出到excel

Answer 1

根据您的描述，我认为 ADF azure 显示器是您的合适选择。使用 Monitor，您可以路由诊断日志以进行分析。数据工厂仅将管道运行数据存储 45 天。您有 3 个选项来存储它们：

1.存储账户

2.活动中心

3.日志分析

您说您想要的目标是数据库表。因此，如果源数据位于 blob 存储中，则使用 ADF 复制活动或Azure Blob 存储触发功能。如果它在事件中心，您可以通过ASA Job将它们传输到数据库中。