0

我有一个网站页面,在加载时会针对一个有 150,000,000 行的表触发 10 个不同的查询。

通常页面在 2 秒内加载 - 但如果我刷新太频繁,它会创建大量查询,从而将页面加载时间减慢 10 秒。

我怎样才能避免触发所有这些查询,因为它会杀死我的数据库?

我还没有缓存。该网站以下列方式工作。我有一张表,所有的 URI 都被存储了。如果用户输入 URL,我会从调用的 URL 中提取 URI,并检查表中是否存储了 URI。如果 URI 存储在表中,我会从关系数据库中的其他表中提取相应的数据。

从其他表中提取信息的 PHP 文件之一的示例代码是这样的

<?php
set_time_limit(2);
define('MODX_CORE_PATH', '/path/to/modx/core/');
define('MODX_CONFIG_KEY','config');
require_once MODX_CORE_PATH . 'model/modx/modx.class.php';

// Criteria for foreign Database
$host = 'hostname';
$username = 'user';
$password = 'password';
$dbname = 'database';
$port = 3306;
$charset = 'utf8mb4';

$dsn = "mysql:host=$host;dbname=$dbname;port=$port;charset=$charset";
$xpdo = new xPDO($dsn, $username, $password);

// Catch the URI that is called
$pageURI = $_SERVER["REQUEST_URI"];

// Get the language token saved as TV "area" in parent and remove it
if (!isset($modx)) return '';

$top = isset($top) && intval($top) ? $top : 0;
$id= isset($id) && intval($id) ? intval($id) : $modx->resource->get('id');
$topLevel= isset($topLevel) && intval($topLevel) ? intval($topLevel) : 0;
if ($id && $id != $top) {
    $pid = $id;
    $pids = $modx->getParentIds($id);
    if (!$topLevel || count($pids) >= $topLevel) {
        while ($parentIds= $modx->getParentIds($id, 1)) {
            $pid = array_pop($parentIds);
            if ($pid == $top) {
                break;
            }
            $id = $pid;
            $parentIds = $modx->getParentIds($id);
            if ($topLevel && count($parentIds) < $topLevel) {
                break;
            }
        }
    }
}
$parentid = $modx->getObject('modResource', $id);
$area = "/".$parentid->getTVValue('area');
$URL = str_replace($area, '', $pageURI);
$lang= $parentid->getTVValue('lang');

// Issue queries against the foreign database:
$output = '';
$sql = "SELECT epf_application_detail.description FROM epf_application_detail INNER JOIN app_uri ON epf_application_detail.application_id=app_uri.application_id WHERE app_uri.uri = '$URL' AND epf_application_detail.language_code = '$lang'";
foreach ($xpdo->query($sql) as $row) {
    $output .= nl2br($row['description']);
}
return $output;
4

2 回答 2

1

在不知道您使用的是什么语言的情况下,这里有一些伪代码可以帮助您入门。

您可以创建一个名为“缓存”之类的单独表,而不是每次加载页面时都触发大型查询。您可以运行查询,然后将查询中的数据存储在该缓存表中。然后当你的页面加载时,你可以查询缓存表,它会小很多,而且当你刷新页面很多时也不会陷入困境。

伪代码(可以使用 cronjob 或其他东西在间隔内完成,以保持缓存新鲜。):

运行十个大型查询对于每个查询,将结果添加cache如下:

query_id  |  query_data
----------------------------------------------------
      1   |  {whatever your query data looks like}

然后,当您的页面加载时,让每个查询从cache

需要注意的是,对于缓存表,您需要经常刷新它。(无论是获得更多数据的频率,还是在设定的时间间隔内,例如每 5 分钟一次。)

于 2013-07-09T14:21:13.830 回答
0

你应该做一些服务器端缓存和优化。

如果我是你,我会为你的数据库安装 Memcached。

我还会考虑像 Varnish 这样的静态缓存,这会将每个页面缓存为静态 HTML,使用 varnish,第二个(以及第三个、第四个……)请求不必由 PHP 和 MySQL 处理,这将使它第二次加载时加载速度更快(当然在缓存生命周期内)。

最后,您可以通过安装 APC(或其他操作码缓存)帮助 PHP 端更好地处理数据。

于 2013-07-17T08:24:35.607 回答