mysql - 如何更快地进行 GROUP BY SUBSTRING 查询？

Question

我有一个具有以下结构的表：

id bigNumber           text
1  1200321030011010233 "an item with some text"
2  1200321030011014563 "another item with some more text"
3  3120323434432211133 "more...."
.
.
.

该表包含大约 50,000 条记录。我想做以下查询，但速度很慢：

  SELECT COUNT(*), 
         bigNumber 
    FROM items 
GROUP BY substr(bigNumber, 1, X)

其中 X 从 2 到 19 不等。

创建 19 列并在每列中包含部分数字以便能够使用索引会更快吗？

Answer 1

我建议不要使用 19 个单独的列，可能只有 3 或 4 个，如下所示：

alter table items
add column bignumber_l1 char(1)
, add column bignumber_l3 varchar(3)
, add column bignumber_l6 varchar(6);

update items
set bignumber_l1 = left(bignumber, 1)
 , bignumber_l3 = left(bignumber, 3)
 , bignumber_l6 = left(bignumber, 6);

alter table items
add index bignumber_l1
, add index bignumber_l3
, add index bignumber_l6;

然后当您查询 x 长度的字符串时，用最长的匹配编写查询而不用更长的时间：

  SELECT COUNT(*), 
         bigNumber 
    FROM items 
GROUP BY bignumber_l3, substr(bigNumber, 1, 4)

此查询可以使用索引，并且可能会显着提高您的性能。请注意，由于您要求的是整个表，因此即使使用上面的索引，mysql 也可能会决定您需要进行表扫描，因此您可能需要使用FORCE INDEX。

Answer 2

You can use an index without adding any columns, just create an index on your bigNumber column:

create index bignum_index on items (bigNumber);

The index on a varchar (bigNumber is a varchar, right?) can be used to look up any string prefix.

That said, you'll need to do a full table scan to answer your query, so an index won't help you all that much.

Answer 3

我认为您正在寻找的结果是 LIKE _X%。不过，这不会使用索引。

SELECT count(*) FROM items WHERE bignumber LIKE "_2%"
SELECT count(*) FROM items WHERE bignumber LIKE "_19%"

_ 表示一个字符

% 表示任意数量的字符

有关更多信息，请参阅MySQL 文档。