etl - 数据集市的完整加载策略是否有任何缺点......？

Question

...除了性能影响？

在我们的情况下，数据量将是可监督的，复杂性可能不会。

背景：
我经历了一个项目，其中数据集市每天都被完全加载。这简化了 ETL，因为不需要进行增量处理。出于同样的原因，性能也是可以接受的。但是，我不确定这种情况是否始终可用，是否存在不利因素，例如当最终用户告诉我们数据自 4 天以来“错误”时 - 很难追溯。

感谢您的输入

Answer 1

根据业务需求，这是一个完全可以接受的策略。

您将失去的一件事是显示缓慢变化维度的历史的能力。如果这对您的业务不重要，请不要担心。

在Ajilius，我们有一位高级时装行业的客户每小时重新加载他们的数据仓库。这是因为需要显示其产品规划周期的近实时可视化，这是季节性的，任何数据都可以随时更改，并且没有长期历史要求。

更常见的情况是源 DBMS 中没有变更数据捕获功能。在这种情况下，您经常会看到大量的事实和维度。事实不太可能 - 您通常有一个日期或时间戳来管理提取 - 但全维度重新加载经常发生。