azure-data-factory - 如何从同一列的多行计算变量或逗号分隔值列

Question

场景：azure 数据流处理来自 csv 数据集的批量记录。为了在目标 sql 上执行相关作业，需要从该 csv 的多行中使用逗号分隔 id。有人可以帮助如何做到这一点。

尝试使用带有合并、连接函数的派生列步骤，但没有得到想要的结果。

Answer 1

使用 collect() 聚合函数。这将像一个字符串 agg 一样。它上周刚刚发布。

https://docs.microsoft.com/en-us/azure/data-factory/data-flow-expression-functions#collect

https://techcommunity.microsoft.com/t5/azure-data-factory/adf-adds-new-hierarchical-data-handling-and-new-flexibility-for/ba-p/1353956