etl - CloverETL：比较两条记录

Question

我有两个文件，A 和 B。两个文件中的记录共享相同的格式，记录的前 n 个字符是它的唯一标识符。该记录为固定长度格式，由 m 个字段组成（field1、field2、field3、...fieldm）。文件 B 包含文件 A 中已更改的新记录和记录。如何使用 cloverETL 确定两个文件中出现的记录中哪些字段发生了更改？

此外，我如何收集有关各个字段更改频率的指标。比如我想知道fieldm中有多少条记录发生了变化。

Answer 1

这是渐变维度问题的典型示例。使用 CloverETL 的解决方案在他们的博客中描述：使用 CloverETL 构建数据仓库：缓慢变化的维度类型 1和使用 CloverETL 构建数据仓库：缓慢变化的维度类型 2。