5

我有一个项目，管理员需要创建多个时事通讯，其中包含一些从网络上抓取的帖子。

抓取完成后，我将帖子插入posts表中，并为它们分配一个feed_id以识别来源。这是posts表的结构（截断）：

CREATE TABLE `posts` (
  `id` int(11) unsigned NOT NULL AUTO_INCREMENT,
  `feed_id` int(11) NOT NULL,
  `created_at` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
  `updated_at` timestamp NULL DEFAULT NULL,
  `identifier` varchar(255) DEFAULT NULL,
  `published` timestamp NULL DEFAULT NULL,
  `content` longtext,
  ...
  ...
  `is_unread` int(1) NOT NULL DEFAULT '1',
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

每个管理员（用户）都可以访问一个或多个“提要”。因此，在时事通讯创建页面中，我想向他们展示他们被允许查看的提要中的帖子列表，并且我还显示了一个按钮以将帖子放在该时事通讯的特定类别中，如果用户之前选择了该帖子，我应该给他看，让他从类别中删除。所以我还有一些其他的表：newsletters, categories, newsletter_post, category_post. 这是它们的结构：

newsletters：

CREATE TABLE `newsletters` (
  `id` int(11) unsigned NOT NULL AUTO_INCREMENT,
  `created_at` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
  `updated_at` timestamp NULL DEFAULT NULL,
  `sent_at` timestamp NULL DEFAULT NULL,
  `title` varchar(255) DEFAULT NULL,
  `date` date DEFAULT NULL,
  `topic_id` int(11) NOT NULL,
  `user_id` int(11) NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

categories：

CREATE TABLE `categories` (
  `id` int(11) unsigned NOT NULL AUTO_INCREMENT,
  `topic_id` int(11) NOT NULL,
  `title` varchar(255) DEFAULT NULL,
  `slug` varchar(255) DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

newsletter_post：

CREATE TABLE `newsletter_post` (
  `id` int(11) unsigned NOT NULL AUTO_INCREMENT,
  `created_at` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
  `updated_at` timestamp NULL DEFAULT NULL,
  `newsletter_id` int(11) NOT NULL,
  `post_id` int(11) NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

category_post：

CREATE TABLE `category_post` (
  `id` int(11) unsigned NOT NULL AUTO_INCREMENT,
  `created_at` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP,
  `updated_at` timestamp NULL DEFAULT NULL,
  `category_id` int(11) NOT NULL,
  `post_id` int(11) NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

因此，我使用此查询来查找允许提要的帖子，并检查帖子是否属于此特定时事通讯的特定类别的状态：

SELECT DISTINCT `posts`.`id`, `published`, `posts`.`title`, `posts`.`content`, `source_name`, `category_id`, `newsletter_id`, `link_href`, categories.title as category_title
FROM `posts`
LEFT JOIN `category_post` ON `posts`.`id` = `category_post`.`post_id`
LEFT JOIN `categories` ON `categories`.`id` = `category_post`.`category_id`
LEFT JOIN `newsletter_post` ON `posts`.`id` = `newsletter_post`.`post_id`
LEFT JOIN `newsletters` ON `newsletters`.`id` = `newsletter_post`.`newsletter_id`
WHERE `feed_id` IN (6, 7) ORDER BY `posts`.`published` DESC LIMIT 40 OFFSET 0

但问题是这太可怕了，而且没有优化。我的posts表每个月最多包含 50,000 行，每行平均有 3~10kbs 的数据，所以有时当我尝试运行查询时（管理员经常运行它来制作时事通讯、分页等）mysql 显示这个错误：加入的行太多等等，而且大多数时候它真的很慢。

我在一个查询中完成所有这些操作的原因是因为我希望结果出现在一个 json 响应中，这样我就可以快速向用户展示而无需执行其他请求。

我想知道是否有更好的方法来执行此查询或使用索引或其他方法。提前感谢您的帮助。

4

4 回答 4

4

索引您的帖子表

（feed_id，已发布）

因此数据已经针对您的 WHERE 子句进行了优化，并预先排序以帮助您的 ORDER BY。

于 2013-01-03T13:53:36.933 回答
3

对于读取需求量很大的查询，InnoDB 效率很低。我建议您使用 NoSQL 数据库，但如果您不想要或更改成本太大……您可以试试这个：

1) 就像 Sallar Kaboli 告诉你的那样，你必须在 JOIN 查询中使用的列中索引你的表。例如：

      CREATE INDEX index1 ON newsletter_post (post_id);

2) 仅使用重要的列进行连接。

我的意思是，您必须只使用在查询的 SELECT 部分中使用的列。

我希望这会有所帮助。

于 2013-01-03T14:00:02.963 回答
2

要完成其他答案，我建议在表上更改此类型posts：

1) 更改feed_id为int(4)。真的你有更多的int(4)饲料吗？
2)is_unread改为bit而不是int(1)。我应该说这可能不会改善您在问题中给定的查询，但根据字段名称，正确的类型是bit.

这个答案的另一个改进是永远不要int(11)对数字或 id 字段使用默认值，分配更具体的类型。使用更小的类型也会改善你的索引。我认为您需要的不仅仅是int(4)字段 id。

例如索引和查询int(3)列比int(11).

于 2013-01-03T14:13:33.600 回答
1

请在 :: 上创建以下索引索引

1) `post_id` in `category_post`
2) `post_id` in `newsletter_post`
于 2013-01-03T13:45:15.300 回答