我想安排一个将 MySql 数据传输到 Google Bigquery 的管道，但是完整的数据会附加到 BQ 中的旧表中，我只想附加增量数据......
问问题
519 次
2 回答
2
您需要能够“更新（如果存在）”原理图，这在 BQ 插件中当前不可用。我们正在努力更新插件以支持它（打开了 JIRA https://issues.cask.co/browse/CDAP-15298）。或者，您可以在每次运行时将其写入单独的表，然后使用“合并”更新主表。打开了一个 JIRA 以添加一个允许合并表的合并操作插件 ( https://issues.cask.co/browse/CDAP-15297 )
于 2019-04-24T17:02:15.167 回答
0
是否可以根据数据中的列计算每次导入的差异？
于 2019-04-24T17:01:40.493 回答