我试图从索引中排除一些页面。我有搜索表单,您可以在其中使用一些预定义的参数或用户键入的查询。我需要阻止具有用户提供的查询的搜索结果。
示例网址:
example.com?adv=0&query=&r=0&woj=0&msc=&osk=&osb=&osn=
# 索引它!example.com?adv=0&query=&r=0&woj=0&msc=&osk=&osb=&osn=
# 也索引它!example.com?adv=0&query=**USER_QUERY**&r=0&woj=0&msc=&osk=&osb=&osn=
# 不要索引!
机器人.txt:
User-Agent: *
Disallow: /example.com?adv=0&query=*&r=0&woj=0&msc=&osk=&osb=&osn=
星号符号会按我的预期工作吗?谷歌会知道星号仅与&query
参数链接,如果此参数为空 URL 是否应编入索引?