3

我正在努力从网络服务器自动收集 PHP 脚本的数据。有问题的文件包含气象数据，每 10 分钟更新一次。奇怪的是，网络服务器上的“文件修改”日期没有改变。

一个简单的fopen ('http://...') 命令尝试每小时获取此目录中最后一个文件的最新版本。但通常我最终会得到一个长达 4 小时的版本。这发生在 Linux 服务器上（正如我的系统管理员向我保证的那样）不使用任何类型的代理服务器。

PHP是否实现了自己的缓存机制？或者还有什么可能在这里干扰？

（我目前的解决方法是通过 exec('wget --nocache...') 来获取文件，它有效。）

4

5 回答 5

2

由于您通过 HTTP 获取文件，我假设 PHP 将尊重服务器响应的任何缓存标头。

避免这种情况的一种非常简单且肮脏的方法是在每个请求中附加一些随机获取参数。

于 2009-02-04T14:06:07.873 回答
2

Q 与观察到的 fopen('http://...') 访问的内容的缓存有关，发帖人想知道 PHP 是否实现了自己的缓存机制？其他答案包括一些猜测，但肯定最简单的找出方法是通过查看源代码进行检查，或者更容易检测系统调用以查看发生了什么？这在 Debian 系统上很简单，如下所示：

$ echo "Hello World" > /var/www/xx.txt
$ strace -tt -o /tmp/strace  \
> php -r 'echo file_get_contents("http://localhost/xx.txt");'
Hello World

我在下面包含了 strace 日志的相关摘录，但这表明 PHP RTS 只是连接到localhost:80，发送一个“GET /xx.txt”，得到一个包含标题和文件内容的响应，然后它会回显到标准输出。

PHP RTS 中绝对不会发生客户端缓存，并且由于这是直接进行 HTTP 套接字对话，因此很难想象缓存会发生在客户端的什么位置。我们留下了服务器端或中间代理缓存的可能性。（注意，我默认为 txt 文件的 Access + 7 天过期）。

日志文件提取

00:15:41.887904 socket(PF_INET6, SOCK_STREAM, IPPROTO_IP) = 3
00:15:41.888029 fcntl(3, F_GETFL)       = 0x2 (flags O_RDWR)
00:15:41.888148 fcntl(3, F_SETFL, O_RDWR|O_NONBLOCK) = 0
00:15:41.888265 connect(3, {sa_family=AF_INET6, sin6_port=htons(80), inet_pton(AF_INET6, "::1", &sin6_addr), sin6_flowinfo=0, sin6_scope_id=0}, 28) = -1 EINPROGRESS (Operation now in progress)
00:15:41.888487 poll([{fd=3, events=POLLIN|POLLOUT|POLLERR|POLLHUP}], 1, 60000) = 1 ([{fd=3, revents=POLLOUT}])
00:15:41.888651 getsockopt(3, SOL_SOCKET, SO_ERROR, [0], [4]) = 0
00:15:41.888838 fcntl(3, F_SETFL, O_RDWR) = 0
00:15:41.888975 sendto(3, "GET /xx.txt HTTP/1.0\r\n", 22, MSG_DONTWAIT, NULL, 0) = 22
00:15:41.889172 sendto(3, "Host: localhost\r\n", 17, MSG_DONTWAIT, NULL, 0) = 17
00:15:41.889307 sendto(3, "\r\n", 2, MSG_DONTWAIT, NULL, 0) = 2
00:15:41.889437 poll([{fd=3, events=POLLIN|POLLPRI|POLLERR|POLLHUP}], 1, 0) = 0 (Timeout)
00:15:41.889544 poll([{fd=3, events=POLLIN|POLLERR|POLLHUP}], 1, 60000) = 1 ([{fd=3, revents=POLLIN}])
00:15:41.891066 recvfrom(3, "HTTP/1.1 200 OK\r\nDate: Wed, 15 F"..., 8192, MSG_DONTWAIT, NULL, NULL) = 285
00:15:41.891235 poll([{fd=3, events=POLLIN|POLLERR|POLLHUP}], 1, 60000) = 1 ([{fd=3, revents=POLLIN}])
00:15:41.908909 recvfrom(3, "", 8192, MSG_DONTWAIT, NULL, NULL) = 0
00:15:41.909016 poll([{fd=3, events=POLLIN|POLLERR|POLLHUP}], 1, 60000) = 1 ([{fd=3, revents=POLLIN}])
00:15:41.909108 recvfrom(3, "", 8192, MSG_DONTWAIT, NULL, NULL) = 0
00:15:41.909198 close(3)                = 0
00:15:41.909323 write(1, "Hello World\n", 12) = 12
00:15:41.909532 munmap(0x7ff3866c9000, 528384) = 0
00:15:41.909600 close(2)                = 0
00:15:41.909648 close(1)                = 0
于 2012-02-15T00:46:07.467 回答
1

因此，如果我对您的理解正确，部分问题可能是 *.dat 文件始终具有 1:00 AM 的时间戳？您是否可以控制包含数据的服务器 ( http://www.iac.ethz.ch/php/chn_meteo_roof/)？如果是这样，您应该尝试找出为什么数据总是具有相同的时间戳。我必须相信它是故意设置的——操作系统会在文件被修改时更新时间戳，除非你不遗余力地让它不这样做。如果您不知道为什么将其设置为凌晨 1 点，您至少可以对文件执行“触摸”命令，这将更新其修改后的时间戳。

当然，这就是全部，假设您对提供文件的服务器有一定的访问权限。

于 2009-02-04T14:17:53.343 回答
0

为什么不尝试使用curl，我认为这是更合适的用途。

于 2009-02-04T14:24:56.323 回答
0

也许这可以解决您的问题（据我所知，无法缓存 POST 请求）

$opts = array('http' =>
  array(
    'method'  => 'POST',
    'content'=>''
  )
);
$context  = stream_context_create($opts);
$resource = fopen ('http://example.com/your-ulr', 'r', false, $context);

/* or you can use file_get_contents to retrieve all the file 
   $fileContent = file_get_contents('http://example.com/your-ulr', false, $context);
*/
于 2009-02-04T14:29:46.830 回答