6

我正在使用以下代码将csv文件转换为类型,feather

import pandas as pd
import feather 
df = pd.read_csv('myfile.csv')
feather.write_dataframe(df, 'myfile.feather')

myfile.csv结束了2G,当我运行代码时,我收到如下错误消息:

File "table.pxi", line 705, in pyarrow.lib.RecordBatch.from_pandas
File "table.pxi", line 739, in pyarrow.lib.RecordBatch.from_arrays
TypeError: Cannot convert pyarrow.lib.ChunkedArray to pyarrow.lib.Array

我查看了类似的问题,发现feather最近开始支持超过 2G 的大文件。但我的羽毛版本是 0.4,所以我认为我的一个已经能够支持大文件。为什么我会收到此错误?任何想法将不胜感激,谢谢。

4

0 回答 0