0

我将我的网站从 One.com 移至 Godaddy.com,并且自从机器人(googlebot、百度、谷歌网站管理员或 freesitemapgenerator)无法访问页面,因为 URL 中注入了一种子目录。Godaddy 的用处很小,但我确信这是他们的结果,因为一切都事先做好了,而且它发生在所有这些不同的机器人上。机器人收到 302 响应。我不知道是什么原因造成的,我肯定包括我的 .htaccess 和 robots.txt 。希望你能有所帮助!

亲切的问候,罗恩

示例: - 日志显示正在访问 www.cuetracker.net/PNaZT/index.php,应该是 www.cuetracker.net/index.php - 日志显示正在访问 www.cuetracker.net/UbnXK/sitemap.xml,应该是 www.cuetracker.net/sitemap.xml

.ht 访问:

ErrorDocument 404 http://www.cuetracker.net/index.php
ErrorDocument 403 http://www.cuetracker.net/index.php

ExpiresActive On
ExpiresByType application/javascript "access plus 1 month"
ExpiresByType text/javascript "access plus 1 month"
ExpiresByType text/css "access plus 1 month"
ExpiresByType image/x-icon "access plus 1 years"
ExpiresByType image/gif "access plus 1 years"
ExpiresByType image/png "access plus 1 years"
ExpiresByType image/jpeg "access plus 1 years"

RewriteEngine on
RewriteCond %{HTTP_HOST} !^www\. [NC]
RewriteRule ^ http://www.%{HTTP_HOST} [L,QSA,R=301]

机器人.txt:

User-agent: *
Disallow: /adm/
Disallow: /pages/s_matches.php
Disallow: /pages/s_frames.php
Disallow: /pages/s_finishes.php
Disallow: /pages/ifr_player.php
Disallow: /inc/
Disallow: /pages/checkH2H.php
4

0 回答 0