谷歌在抓取网站时是否会关注按钮和表单输入?我正在将 rel="nofollow" 标签添加到我不希望谷歌关注的链接,但我不确定是否需要将它们添加到按钮。
例如“添加到购物车”按钮。
谢谢
一般来说,没有。尤其不是基于 POST 的表单;POST 根据RFC可能有副作用,而 GET 被定义为“安全”方法。然而,谷歌正在试验一些“深网”爬虫,因此他们可能会请求基于 GET 的表单——但据我所知,这还不常见。
但根据标准,蜘蛛不应该 POST。
事实上,谷歌最初的公告声明他们只遵循基于 GET 的表单。
您的“添加到购物车”按钮应该发布表单或执行 JavaScript。谷歌不会做这两件事中的任何一件。
嗨机器人不提交任何形式的发布请求。
google 确实遵循 rel=nofollow 链接,它只是不假定您正在“担保”他们链接的内容