Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
当我将一个页面指定为有<meta name="robots" content="noindex"/>时,搜索爬虫是否会查看描述和关键字元标记?我可以完全排除它们吗?
<meta name="robots" content="noindex"/>
您可以完全排除它们。搜索引擎不使用元关键字和描述进行索引。元描述仅用于在搜索结果中显示信息,但由于您不索引页面,因此创建描述没有意义。
该noindex值不允许索引文档的内容。
noindex
当机器人爬取这个文档时,它当然可以看到所有内容,包括meta-description和meta- keywords,但它可能不会索引这个内容。
meta
description
keywords