我正在编写一个广告管理器,每次用户点击链接时都会记录下来。如何修改这些链接以阻止搜索引擎抓取我的网站?我知道,最明显的是带有“nofollow”链接,但我该如何阻止其他人呢?是否有搜索引擎 ips 列表或其他方式来阻止它们?
问问题
70 次
1 回答
3
PHP检测浏览器get_browser
<?php
echo $_SERVER['HTTP_USER_AGENT'] . "\n\n";
$browser = get_browser(null, true);
print_r($browser);
?>
http://php.net/manual/en/function.get-browser.php
使用 robots.txt 排除文件阻止搜索引擎抓取您的网站:
于 2013-09-08T04:16:09.963 回答