我有这段代码,它应该从存储在 S3 上的镶木地板文件中读取单列数据:
fs = s3fs.S3FileSystem()
data_set = pq.ParquetDataset(f"s3://{bucket}/{key}", filesystem=fs)
column_data = data_set.read(columns=[col_name])
我得到了这个例外: validate_schemas self.schema = self.pieces[0].get_metadata(open_file).schema IndexError: list index out of range
我升级到最新版本的 pyarrow 但没有帮助