talend - 如何在talend中执行条件重复数据删除

Question

我有一张包含员工 ID、姓名和最后生效日期的表格。我只想保留最大（最后生效日期）的员工 ID，并丢弃其他具有较早最后生效日期的重复员工 ID 行。

我正在尝试使用tAggregateand来实现这一点tFilterRow。我尝试使用计数来执行计数，tAggregate但它没有捕获 max(lasteffectivedate)。

Answer 1

使用 tAggreggateRow 您可以：

如果您也想获取 ID，则需要在 tMap（主分支）中重用您的主要流程，并将具有 tAggregateRow 的流程放在 tMap 的查找中。之后，您将加入姓名和日期。