3

我当前的代码（见下文）使用 147MB 的虚拟内存！我的提供程序默认分配了 100MB，并且该进程在运行后被终止，导致内部错误。该代码使用 curl multi 并且必须能够循环超过 150 次迭代，同时仍然最小化虚拟内存。下面的代码仅设置为 150 次迭代，仍然会导致内部服务器错误。在 90 次迭代时，问题不会发生。

如何调整我的代码以降低资源使用/虚拟内存？

谢谢！

<?php

    function udate($format, $utimestamp = null) {
      if ($utimestamp === null)
        $utimestamp = microtime(true);
      $timestamp = floor($utimestamp);
      $milliseconds = round(($utimestamp - $timestamp) * 1000);
      return date(preg_replace('`(?<!\\\\)u`', $milliseconds, $format), $timestamp);
    }

$url = 'https://www.testdomain.com/';
$curl_arr = array();
$master = curl_multi_init();

for($i=0; $i<150; $i++)
{
    $curl_arr[$i] = curl_init();
    curl_setopt($curl_arr[$i], CURLOPT_URL, $url);
    curl_setopt($curl_arr[$i], CURLOPT_RETURNTRANSFER, 1);
    curl_setopt($curl_arr[$i], CURLOPT_SSL_VERIFYHOST, FALSE);
    curl_setopt($curl_arr[$i], CURLOPT_SSL_VERIFYPEER, FALSE);
    curl_multi_add_handle($master, $curl_arr[$i]);
}

do {
    curl_multi_exec($master,$running);
} while($running > 0);

for($i=0; $i<150; $i++)
{
    $results = curl_multi_getcontent ($curl_arr[$i]);
    $results = explode("<br>", $results);
      echo $results[0];
      echo "<br>";
      echo $results[1];
      echo "<br>";
      echo udate('H:i:s:u');
      echo "<br><br>";
      usleep(100000);
}

?>
4

3 回答 3

2

根据你的最后评论..

下载RollingCurl.php.

希望这将充分地从您的 API 中向生活中的日光发送垃圾邮件。

<?php

$url = '________';
$fetch_count = 150;
$window_size = 5;


require("RollingCurl.php");

function request_callback($response, $info, $request) {
    list($result0, $result1) = explode("<br>", $response);
    echo "{$result0}<br>{$result1}<br>";
    //print_r($info);
    //print_r($request);
    echo "<hr>";
}


$urls = array_fill(0, $fetch_count, $url);

$rc = new RollingCurl("request_callback");
$rc->window_size = $window_size;
foreach ($urls as $url) {
    $request = new RollingCurlRequest($url);
    $rc->add($request);
}
$rc->execute();

?>

浏览您的问题，我看到了这条评论：

如果意图是域名抢夺，那么使用其中一项已建立的服务是更好的选择。您的脚本实现几乎没有实际连接和延迟那么重要。

我同意那个评论。

此外，您似乎已经发布了大约七百次“相同的问题” ：

https://stackoverflow.com/users/558865/icer
https://stackoverflow.com/users/516277/icer

如何调整服务器以更快地运行我的 PHP 脚本？
如何重新编码我的 php 脚本以尽快运行？
如何运行 cURL 一次，循环检查域可用性？请帮助修复代码 请
帮助修复 php/api/curl 代码
如何通过优化我的 PHP 代码来减少虚拟内存？
重叠 HTTPS 请求？
多个https请求..怎么办？

你必须一遍又一遍地问同样的问题，这难道不是告诉你你做错了吗？

你的这个评论：

@mario：干杯。我正在与其他 2 家公司竞争特定的 ccTLD。他们是游戏的新手，他们在很慢的时间内抢购这些域名（清除时间后最多 10 秒）。我现在只是慢了一点。

如果您在抢购过期域名方面认真地试图击败两家公司，我相当肯定共享主机帐户上的 PHP 是错误的工具。

于 2011-01-02T23:19:24.400 回答
0

150 个查询中的每一个的结果都存储在 PHP 内存中，您的证据表明这是不够的。唯一的结论是您不能在内存中保留 150 个查询。您必须有一种流式传输到文件而不是内存缓冲区的方法，或者只是减少查询次数并批量处理 URL 列表。

要使用流，您必须设置CURLOPT_RETURNTRANSFER为 0 并为 实现回调CURLOPT_WRITEFUNCTION，PHP 手册中有一个示例：

http://www.php.net/manual/en/function.curl-setopt.php#98491

function on_curl_write($ch, $data)
{
  global $fh;
  $bytes = fwrite ($fh, $data, strlen($data));
  return $bytes;
}

curl_setopt ($curl_arr[$i], CURLOPT_WRITEFUNCTION, 'on_curl_write');

在回调中获取正确的文件句柄留给读者解决。

于 2010-12-31T01:47:55.210 回答
0 
<?php

echo str_repeat(' ', 1024); //to make flush work

$url = 'http://__________/';
$fetch_count = 15;
$delay = 100000; //0.1 second
//$delay = 1000000; //1 second


$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, FALSE);
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE);


for ($i=0; $i<$fetch_count; $i++) {

    $start = microtime(true);

    $result = curl_exec($ch);

    list($result0, $result1) = explode("<br>", $result);
    echo "{$result0}<br>{$result1}<br>";
    flush();

    $end = microtime(true);

    $sleeping = $delay - ($end - $start);
    echo 'sleeping: ' . ($sleeping / 1000000) . ' seconds<hr />';
    usleep($sleeping);

}

curl_close($ch);

?>
于 2010-12-31T03:18:26.927 回答