google-cloud-data-fusion - 如何在 Data Fusion Studio 中将节点的输出作为属性变量传递给下一个节点

Question

QS 1：如何读取包含节点基本属性的配置表/文件{例如：源和接收器表名称等}，并在 FUSION 管道的下一个节点中使用该输出。

尝试使用远程程序执行器，命令为 -

bq query --format csv 'select SOURCE_TABLE,TASK_ID,DELTA_DATE from FUSIONDATASET.TEST_CONFIG where RUN_STATUS=0'

现在如何在源 bigQuery 节点的 TABLE 属性中的嵌套管道节点中使用此输出，例如 SOURCE_TABLE col

score 0 · Accepted Answer

您可以使用操作插件来设置可用于管道中任何后续阶段的运行时参数。

作为示例，您可以参考参数设置器插件，该插件读取一组配置并将这些设置为运行时参数。https://github.com/data-integrations/argument-setter/

1 回答 1