palantir-foundry - 在 Foundry 中，是否可以从级联导入中提取原始文件名？

Question

我需要将数十亿个非常小的图像文件导入 Foundry。我知道 Foundry 不能很好地处理这么多文件，因此最佳做法是将它们连接起来并使导入增量。

但是，我需要能够获取原始文件及其名称，以便能够在我的管道中处理它们。如何从连接文件中取回原始文件？

Answer 1

原始文件名、大小和修改日期包含在事务元数据中：

假设您需要跨多个事务的数据，您可能希望尽可能增量地执行此操作。