bigsql - 如何将子目录数据读入bigsql表？

Question

Bigsql 无法像 hive 那样通过设置参数从子目录中读取数据。

set tblproperties (
    "hive.input.dir.recursive" = "TRUE",
    "hive.mapred.supports.subdirectories" = "TRUE",
    "hive.supports.subdirectories" = "TRUE",
    "mapred.input.dir.recursive" = "TRUE")

我尝试将上述参数添加到 bigsql 表属性中，但它无法读取子目录数据。

我需要在 bigsql 中设置哪些参数来读取子目录数据？

Answer 1

据我了解，Bigsql 只查找父目录中的文件。它甚至不用检查子目录。它将显示一个空表，因为它无法递归读取数据。此功能仍在 IBM 产品和工程团队的产品改进想法中。