1

我正在跟踪用户对我们网站上课程页面的访问。我这样做是为了对于任何给定的课程(又名产品),我可以拉出用户访问过的其他顶级课程页面的列表,他们也访问过当前页面 - 就像亚马逊的“查看过此项目的客户也查看过”特征。

我所拥有的是工作,但随着收集的数据不断增长,查询时间变得越来越慢。我现在有大约 30 万条记录,每个查询需要 2 秒以上。我们希望在达到大约 2M 条记录时开始修剪数据,但考虑到我们目前面临的性能问题,我认为这是不可能的。我想知道是否有更好的方法来解决我的问题。

这是血腥的细节......

我有一个简单的三列 InnoDB 表,其中包含用户 ID、课程编号和时间戳。用户 ID 和课程编号字段被编入索引,用户 ID/课程编号也被编入索引。这是表架构:

CREATE TABLE IF NOT EXISTS `coursetracker` (
  `user` varchar(38) NOT NULL COMMENT 'user guid',
  `course` char(8) NOT NULL COMMENT 'subject code and course number',
  `visited` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT 'last visited time',
  UNIQUE KEY `ndx_user_course` (`user`,`course`),
  KEY `ndx_user` (`user`),
  KEY `ndx_course` (`course`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='tracking user visits to courses';

表中的数据如下所示:

user                                   | course   | visited
=======================================|==========|====================
{00001A4C-1DE0-C4FB-0770-A758A167B97E} | OFFC2000 | 2013-01-19 23:18:03
{00001FB0-179E-1E28-F499-65451E5C1465} | FSCT8481 | 2013-01-30 13:12:29
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP1409 | 2013-01-13 16:09:42
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP2051 | 2013-01-13 16:20:41
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP2870 | 2013-01-13 16:25:41
{0000582C-5959-EF2B-0637-B5326A504F95} | COMP2920 | 2013-01-13 16:24:40
{00012C64-2CA1-66DD-5DDC-B3714BFC91C3} | COMM0005 | 2013-02-18 21:32:36
{00012C64-2CA1-66DD-5DDC-B3714BFC91C3} | COMM0029 | 2013-02-18 21:34:04
{00012C64-2CA1-66DD-5DDC-B3714BFC91C3} | COMM0030 | 2013-02-18 21:34:50
{00019F46-6664-28DD-BCCD-FA6810B4EBB8} | COMP1409 | 2013-01-16 15:48:49

我用来获取任何给定课程(本例中为 COMP1409)的相关课程的示例查询如下所示:

SELECT `course`,
       count(`course`) c
FROM `coursetracker`
WHERE `user` IN
        (SELECT `user`
         FROM `coursetracker`
         WHERE `course` = 'COMP1409')
    AND `course` != 'COMP1409'
GROUP BY `course`
ORDER BY c DESC LIMIT 10

此查询的结果如下所示:

course   | c
=========|====
COMP1451 | 470
COMP1002 | 367
COMP2613 | 194
COMP1850 | 158
COMP1630 | 156
COMP2617 | 126
COMP2831 | 119
COMP2614 | 95
COMP1911 | 79
COMP1288 | 76

所以,除了性能之外,上面的一切都完全按照我的意愿工作。该表是如此简单,以至于没有什么可以索引的了。SQL 查询产生我正在寻找的数据。我对如何更快地做到这一点没有想法。我将不胜感激有关该方法的任何反馈。

4

2 回答 2

2

您可以尝试加入:

SELECT c1.`course`,
       count(c1.`course`) as c
FROM `coursetracker` c1
INNER JOIN `coursetracker` c2
ON c1.`user` = c2.`user`
WHERE c2.`course` = 'COMP1409'
AND c1.`course` != 'COMP1409'
GROUP BY c1.`course`
ORDER BY c DESC LIMIT 10
于 2013-03-07T22:00:22.487 回答
0

很难在没有看到您的解释的情况下分辨,但也许将表格加入自身会更快?

SELECT `course`, count(`course`) c
FROM `coursetracker` c
 INNER JOIN `coursetracker` c2 ON c.user = c2.user
WHERE c2.`course` = 'COMP1409'
AND  c.`course` != 'COMP1409'
GROUP BY `course`
ORDER BY c DESC LIMIT 10
于 2013-03-07T22:02:03.640 回答