最近我似乎从 Google 网站管理员工具中收到了很多 404 错误。有没有办法禁止此类链接被索引?他们来自哪里?
感谢您能否对此事有所了解。提前致谢。
我在 opencart 1.5.4.1 上。
这些是 404 错误
http://mydomain.com/product/search&filter_tag=Purse&sort=rating&order=ASC&limit=25
http://mydomain.com/product/search&sort=p.price&order=DESC&filter_tag=&limit=25
http://mydomain.com/cart?qty=1&id_product=323&token=bfcf19e76ed4a88abd8508e8dc097a70&add
我还在我的 robots.txt 中包含以下条目,但无济于事
User-agent: Googlebot
User-agent: *
Disallow: /cgi-bin
Disallow: /*?limit
Disallow: /*&limit
Disallow: /*?sort
Disallow: /*&sort
Disallow: /*?route=checkout
Disallow: /*?route=account
Disallow: /*?route=product/search
Disallow: /*?route=affiliate
Disallow: /*&keyword
Disallow: /*?page=1