我正在跟踪用户对我们网站上课程页面的访问。我这样做是为了对于任何给定的课程(又名产品),我可以拉出用户访问过的其他顶级课程页面的列表,他们也访问过当前页面 - 就像亚马逊的“查看过此项目的客户也查看过”特征。
我所拥有的是工作,但随着收集的数据不断增长,查询时间变得越来越慢。我现在有大约 30 万条记录,每个查询需要 2 秒以上。我们希望在达到大约 2M 条记录时开始修剪数据,但考虑到我们目前面临的性能问题,我认为这是不可能的。我想知道是否有更好的方法来解决我的问题。
这是血腥的细节......
我有一个简单的三列 InnoDB 表,其中包含用户 ID、课程编号和时间戳。用户 ID 和课程编号字段被编入索引,用户 ID/课程编号也被编入索引。这是表架构:
CREATE TABLE IF NOT EXISTS `coursetracker` (
`user` varchar(38) NOT NULL COMMENT 'user guid',
`course` char(8) NOT NULL COMMENT 'subject code and course number',
`visited` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT 'last visited time',
UNIQUE KEY `ndx_user_course` (`user`,`course`),
KEY `ndx_user` (`user`),
KEY `ndx_course` (`course`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='tracking user visits to courses';
表中的数据如下所示:
user | course | visited
=======================================|==========|====================
{00001A4C-1DE0-C4FB-0770-A758A167B97E} | OFFC2000 | 2013-01-19 23:18:03
{00001FB0-179E-1E28-F499-65451E5C1465} | FSCT8481 | 2013-01-30 13:12:29
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP1409 | 2013-01-13 16:09:42
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP2051 | 2013-01-13 16:20:41
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP2870 | 2013-01-13 16:25:41
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP2920 | 2013-01-13 16:24:40
{00012C64-2CA1-66DD-5DDC-B3714BFC91C3} | COMM0005 | 2013-02-18 21:32:36
{00012C64-2CA1-66DD-5DDC-B3714BFC91C3} | COMM0029 | 2013-02-18 21:34:04
{00012C64-2CA1-66DD-5DDC-B3714BFC91C3} | COMM0030 | 2013-02-18 21:34:50
{00019F46-6664-28DD-BCCD-FA6810B4EBB8} | COMP1409 | 2013-01-16 15:48:49
我用来获取任何给定课程(本例中为 COMP1409)的相关课程的示例查询如下所示:
SELECT `course`,
count(`course`) c
FROM `coursetracker`
WHERE `user` IN
(SELECT `user`
FROM `coursetracker`
WHERE `course` = 'COMP1409')
AND `course` != 'COMP1409'
GROUP BY `course`
ORDER BY c DESC LIMIT 10
此查询的结果如下所示:
course | c
=========|====
COMP1451 | 470
COMP1002 | 367
COMP2613 | 194
COMP1850 | 158
COMP1630 | 156
COMP2617 | 126
COMP2831 | 119
COMP2614 | 95
COMP1911 | 79
COMP1288 | 76
所以,除了性能之外,上面的一切都完全按照我的意愿工作。该表是如此简单,以至于没有什么可以索引的了。SQL 查询产生我正在寻找的数据。我对如何更快地做到这一点没有想法。我将不胜感激有关该方法的任何反馈。