3

我使用多卷曲检索一些页面,从 1 到 200。问题是列表中的第一个链接总是返回空!我不明白为什么!o_o

$mh = curl_multi_init();

for($j=0; $j<$i; $j++){
    $ch[$j] = curl_init($Links[$j]);
    curl_setopt($ch[$j], CURLOPT_CONNECTTIMEOUT, $curlConTimeOut);
    curl_setopt($ch[$j], CURLOPT_TIMEOUT, $curlTimeOut);
    curl_setopt($ch[$j], CURLOPT_RETURNTRANSFER, true);
    curl_setopt($ch[$j], CURLOPT_MAXREDIRS, 3);
    curl_setopt($ch[$j], CURLOPT_FOLLOWLOCATION, 1);
    curl_multi_add_handle($mh, $ch[$j]);
}

$active = null;
do {
    $mrc = curl_multi_exec($mh, $active);
} while ($mrc == CURLM_CALL_MULTI_PERFORM);

while ($active && $mrc == CURLM_OK) {
    if (curl_multi_select($mh) != -1) {
        do {
            $mrc = curl_multi_exec($mh, $active);
        } while ($mrc == CURLM_CALL_MULTI_PERFORM);
    }
}
$Si = 0; $Fi = 0; $Disp = "";
for($j=0; $j<$i; $j++){
    if($ch[$j]){
        if(curl_multi_getcontent($ch[$j]) == null){
            $Disp .= '0';
            $Fi++;
        }else{
            $Disp .= '1';
            $Si++;
        }           
        curl_multi_remove_handle($mh, $ch[$j]);
        curl_close($ch[$j]);
    }
}
curl_multi_close($mh);

$Si / $Fi / $Disp 仅用于测试,结果示例如下:

链接成功:65/161

链接失败:96/161

Disp: 00000000000000000000000000000000000000000000000000000000000000000000000000000000000000000001111111111111111101111110011111111001111111111111111111111111111111111

其中0代表失败,1代表成功。如果 N 元素为 0,则表示 N Link 返回 NULL

不可能每次只有首字母元素返回null!!几率是多少?!?!?!我要求 curl_error,所有内容都是:“连接在 XXXXX 毫秒后超时”!

1°:13852 毫秒

2°:13833 毫秒 ... 12676 毫秒 ... 10195 ... 并继续下降到 6007 毫秒,然后开始正确的!

CURLOPT_CONNECTTIMEOUT 设置为 6 秒!

为什么每次都从一个较大的数字开始到6,然后返回对吗?O_o 我想强调一下,空响应的顺序仅取决于列表!不从多卷曲时间响应!

另一个链接较少的示例:

| 链接成功:30/52

| 链接失败:22/52

| 显示:00000000000000000000001111111111011111111111111111111

4

1 回答 1

0

正如您所看到的,当您执行/请求更少的内容/页面时,您会更快地达到 1(1 是成功,0 是错误)。

据我所知,您的第一个请求已超时。我的猜测是您需要降低每次请求/执行的数量。让我们继续执行 5,获取值,然后执行下一个 5。

5 只是我说的一个数字,所以测试哪个数字更适合你。如果你的处理器可以同时处理更多的东西,这个数字可能会更大。但也仅限于互联网的另一端他们的响应速度。

希望有帮助

于 2013-04-04T12:45:14.610 回答