mysql - 如何快速从大表中选择一组 ID？

Question

我有一个以 ID 为主的大表。大约 300 万行，我需要根据给定的 ID 列表提取一小组行。

目前我正在哪里做......但它很慢，比如5到10秒。

我的代码：

select id,fa,fb,fc 
from db1.t1 
where id in(15,213,156,321566,13,165,416,132163,6514361,... );

我尝试一次查询一个 ID，但它仍然很慢。喜欢

select id,fa,fb,fc from db1.t1 where id =25;

我还尝试使用临时表并插入 ID 列表并调用 Join。但没有改善。

select id,fa,fb,fc from db1.t1 inner join  db1.temp  on t1.id=temp.id

有没有办法让它更快？

这是桌子。

CREATE TABLE  `db1`.`t1` (
  `id` int(9) NOT NULL,
  `url` varchar(256) COLLATE utf8_unicode_ci NOT NULL,
  `title` varchar(1024) COLLATE utf8_unicode_ci DEFAULT NULL,
  `lastUpdate` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  `lastModified` datetime DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;

好的，这里是解释选择。

id=1,
select_type='SIMPLE', 
table='t1', 
type='range', 
possible_keys='PRIMARY', 
key='PRIMARY',
key_len= '4',
ref= '', 
rows=9, 
extra='Using where'

score 0 · Accepted Answer

首先，如果我没记错的话，聚集索引比非聚集索引更快。然后有时即使您在表上有索引，也尝试创建重新索引或创建统计信息以重建它。

我在 SQL 解释计划中看到，当我们在 (...) 中使用 where ID 时，它会将其转换为 Where (ID =1) 或 (ID=2) 或 (Id=3)..... 所以列表更大很多 OR，所以对于非常大的表，避免使用 IN ()

尝试“解释”这个 SQL，它可以告诉你实际的瓶颈在哪里。检查此链接http://dev.mysql.com/doc/refman/5.5/en/explain.html 希望会起作用

score 0 · Accepted Answer

以下是一些提示，您可以如何加快表的性能：

尽量避免对频繁更新的 MyISAM 表进行复杂的 SELECT 查询，以避免由于读取器和写入器之间的争用而发生的表锁定问题。
要根据索引对索引和数据进行排序，请使用myisamchk --sort-index --sort-records=1（假设您要对索引 1 进行排序）。如果您有一个唯一索引，您希望根据该索引按顺序读取所有行，那么这是一种加快查询速度的好方法。第一次以这种方式对大表进行排序时，可能需要很长时间。
对于频繁更改的 MyISAM 表，请尽量避免使用所有可变长度列（VARCHAR、BLOB和TEXT）。如果该表甚至包含单个可变长度列，则该表使用动态行格式。
字符串在 MyISAM 索引中自动压缩前缀和结束空间。请参阅“创建索引语法”</a>。

您可以通过在应用程序中缓存查询或答案，然后一起执行许多插入或更新来提高性能。在此操作期间锁定表可确保索引缓存仅在所有更新后刷新一次。您还可以利用 MySQL 的查询缓存来实现类似的结果；请参阅 “MySQL 查询缓存”。.

您可以进一步阅读这篇关于优化查询的文章。

score -1 · Accepted Answer

看起来使用 'in' 的原始 sql 语句应该没问题，因为 Id 列已编入索引

我认为您基本上需要一台更快的计算机-您是否在共享主机上进行此查询？

mysql - 如何快速从大表中选择一组 ID？

3 回答 3

Related

Reference