我正在使用以下代码将csv
文件转换为类型,feather
import pandas as pd
import feather
df = pd.read_csv('myfile.csv')
feather.write_dataframe(df, 'myfile.feather')
myfile.csv
结束了2G
,当我运行代码时,我收到如下错误消息:
File "table.pxi", line 705, in pyarrow.lib.RecordBatch.from_pandas
File "table.pxi", line 739, in pyarrow.lib.RecordBatch.from_arrays
TypeError: Cannot convert pyarrow.lib.ChunkedArray to pyarrow.lib.Array
我查看了类似的问题,发现feather
最近开始支持超过 2G 的大文件。但我的羽毛版本是 0.4,所以我认为我的一个已经能够支持大文件。为什么我会收到此错误?任何想法将不胜感激,谢谢。