exception - Azure 数据工厂复制活动错误记录异常处理

Question

在复制活动中，设置中有一个功能，我们可以告诉系统在出现错误时要做什么。有 3 个选项可用。中止第一个错误记录，跳过所有错误行，跳过错误行并记录它们。我们能以某种方式实现以下功能吗？- 如果文件中有超过 10% 的记录抛出错误，则跳过该文件，否则加载

提前致谢

Answer 1

我有一个解决方法，如果您有更好的解决方法，请告诉我 - 使用容错设置将数据加载到目标为“跳过并记录不兼容的行” - 我们将获得达到复制活动的总行数和进入目标的行数。从这两个数字我们可以计算出百分比。- 如果该百分比超过 10（或阈值），则从目标中删除数据并通知相关团队或将其放入审核日志

仅供参考 - 如果我们直接使用脚本加载数据，此功能在雪花 DW 中可用。