4

好吧,我试图重用我在初始过程中产生的句柄,但是在第一次运行之后它就停止工作了。如果我删除(或重新创建整个处理程序)句柄并再次添加它们,它工作正常。这可能是什么罪魁祸首?

我的代码目前如下所示:

<?php
echo 'Handler amount: ';
$threads = (int) trim(fgets(STDIN));
if($threads < 1) {
    $threads = 1;
}

$s = microtime(true);
$url = 'http://mywebsite.com/some-script.php';

$mh = curl_multi_init();
$ch = array();
for($i = 0; $i < $threads; $i++) {
    $ch[$i] = curl_init($url);
    curl_setopt_array($ch[$i], array(
        CURLOPT_USERAGENT => 'Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20130213 Firefox/21.0',
        CURLOPT_REFERER => $url,
        CURLOPT_RETURNTRANSFER => true,
        CURLOPT_NOBODY => true
    ));

    curl_multi_add_handle($mh, $ch[$i]);
}

while($mh) {
    $running = null;
    do {
        curl_multi_exec($mh, $running);
    } while($running > 0);

    $e = microtime(true);
    $totalTime = number_format($e - $s, 2);
    if($totalTime >= 1) {
        echo floor($threads / $totalTime) . ' requests per second (total time '.$totalTime.'s)' . "\r";
        $s = microtime(true);
    }
}

foreach($ch as $handler) {
    curl_multi_remove_handle($mh, $handler);
    curl_close($handler);
}

curl_multi_close($mh);
?>

当我CURLOPT_VERBOSE设置为 时true,我看到许多“additional stuff not fine transfer.c:1037: 0 0”消息,我在另一个问题上阅读了它们,似乎是由一些明显的事情引起的:

  • 太快

  • 防火墙

  • ISP 限制

AFAIK,不是这样,因为如果我每次都重新创建句柄,它们会以每秒约 79 个请求成功完成(每个请求约 529 个字节)

我重用手柄的过程:

  1. 创建多处理程序,并将指定数量的句柄添加到多处理程序

  2. 当 mutli 处理程序工作时,执行所有句柄

  3. 在 while 循环停止后(似乎不太可能),关闭所有句柄和多卷曲处理程序

它执行一次所有句柄,然后停止。

这真的难倒我。有任何想法吗?

4

1 回答 1

2

我遇到了同样的问题(虽然使用 C++),发现我需要删除 curl 简单句柄并重新添加它。我的解决方案是在 curl_multi_perform 循环结束时删除所有句柄,并将它们重新添加到我重用现有保持活动连接的外部循环的开头:

for(;;) // loop using keep-alive connections
{
    curl_multi_add_handle(...)
    while ( stillRunning ) // curl_multi_perform loop 
    {
        ...
        curl_multi_perform(...)
        ...
    }
    curl_multi_remove_handle(...)
}

也许这也适用于您的 PHP 场景。记住:不要在两者之间curl_easy_cleanup使用curl_easy_init卷曲手柄。

如果您打开CURLOPT_VERBOSE您可以在控制台中进行操作,并且您的连接确实被重用了。这为我解决了这个问题。

于 2018-11-07T17:16:51.633 回答