0

我有 azure 数据工厂管道,它通过调用 Azure 数据流来存储具有某些操作的数据。这里 blob 存储中的文件名应该是 pipeline-run-id。

管道复制活动具有“复制行为”,我在数据流的接收器流中找不到相关选项?

现在我遇到了一种情况,我要在同一个管道执行中多次调用同一个 Azure 数据流。因此,我的文件在 blob 中被覆盖。但是如果存在,我想将新数据附加到同一个文件中。

前任。如果管道运行 id '9500d37b-70cc-4dfb-a351-3a0fa2475e32' 并且从该管道执行 2 次数据流调用。在这种情况下,9500d37b-70cc-4dfb-a351-3a0fa2475e32.csv 只有具有第二个天蓝色数据流处理的数据。

4

1 回答 1

0

数据流不支持copyBehavior。这意味着数据流不支持合并/追加文件。 在此处输入图像描述

每次调用数据流时,它都会创建一个新文件“9500d37b-70cc-4dfb-a351-3a0fa2475e32.csv”并替换现有的“9500d37b-70cc-4dfb-a351-3a0fa2475e32.csv”。

希望这可以帮助。

于 2020-01-20T02:22:43.497 回答