mysql - 改进mysql加载数据

Question

是否有任何 mysql 参数可以提高 "LOAD DATA INFILE" 的速度？

我正在使用 1 个 MyISAM 和 1 个 TokuDB 表。数据保存为制表符分隔的文本文件。

Answer 1

有多种方法可以加快速度。 http://dev.mysql.com/doc/refman/5.1/en/insert-speed.html

对于大型插入，通常是索引更新会减慢速度。因此，即使使用锁定表、关闭索引更新等技术，创建索引仍然需要很长时间。通过增加 key_buffer_size 的值，可以加快 MyISAM 表上的索引创建和插入。使其足够大以容纳索引，并且您的插入速度可以提高几个数量级。如果需要，您可以在插入后减少它。

Answer 2

您是加载到空表还是已在其中行的表中？如果表为空，TokuDB 将实现它的批量加载器并非常快速地加载数据。

此外，如果您将数据加载到具有唯一索引（PK 或辅助索引）的表中，如果您知道数据是唯一的，请关闭 unique_checks。