我应该在我的 robots.txt 文件中添加什么内容,以使 adsense bot 不会遇到任何问题来创建我的网站?在 Google 支持 ( http://support.google.com/adsense/bin/answer.py?hl=en&answer=10532 ) 中,建议添加以下行
User-agent: Mediapartners-Google
Disallow:
但是在许多在线资源中,甚至在维基百科中,建议的行是:
User-agent: Mediapartners-Google*
Disallow:
任何人都可以请我澄清一下,我需要添加“*”吗?添加这个“*”符号的目的是什么?如果它很重要,那么为什么谷歌没有提到它在其支持页面中添加 * 呢?