subdomain - 使用 robots.txt 禁止子域 url

Question

我想问你一个问题...

我有一个域 kiosban.com 和 store.kiosban.com..

我想禁止

store.kiosban.com/template/*

我的 store.kiosban.com/robots.txt 上有这个

但是当我查看谷歌网站管理员工具时......在健康菜单>>被阻止的网址上，我得到了

robots.txt file                         Blocked URLs    Downloaded  Status
http://www.store.kiosban.com/robots.txt -             Never 

我做错什么了吗？？

Answer 1

www.store.kiosban.com并且store.kiosban.com是不同的主机。您应该在两台主机上都提供 robots.txt，或者更好的是 301 将一种形式重定向到另一种形式。

但这似乎不是你的问题。看起来谷歌只需要一些时间来抓取您的网站。它的 robots.txt。