python - 解开巨大的泡菜文件

Question

我使用 joblib.dump() 为 RainForestClassifer 训练样本生成了大约 6 GB 的巨大泡菜文件。每次执行都必须使用 joblib.load() 加载 pickle 对象以处理输入数据。加载时间非常长，随后会影响脚本执行的性能。

有没有一种方法可以将对象一旦加载就可以持久保存在内存中，并使其可用于后续的 python 执行，而无需调用 joblib.load()。

使用像 sqlite 这样的数据库是否有助于更快地加载数据？