python - 如何递归遍历给定的HDFS目录并在pyspark中获取带有路径的文件名

Question

我在 hdfs 中的目录结构如下所示：

- - 目录

 |----sub folder 1
          |--------file 1
          |---------file 2
 |                          
 |----sub folder 2
            |--------file 1
            |---------file 2
 |----sub folder 3
            |--------file 1
            |---------file 2
 |----file 1

我想递归遍历 HDFS 目录以检索所有文件名及其路径。