python - 从远程服务器读取/写入百万行的最有效方法是什么？

Question

有人可以指出我使用 SQLAlchemy 和 Python 从远程服务器读取/写入数百万行的有效方法（以避免内存不足错误）吗？

谢谢，

Answer 1

在读取数据时迭代您的结果集，以便您一次只处理一行，而不是在实际处理它们之前将整个数据集拉入内存。

对于写作，同样如此。为了提高效率，一次只处理一条记录。