我对搜索引擎优化有点陌生,我只是想写一个 robots.txt 文件。我想禁止条款和条件文件夹中的页面,其中有一个空格。
我应该写:
Disallow: /Page TermsAndConditions/
或者:
Disallow: /Page%20TermsAndConditions/
或两者兼而有之,还是无所谓?
(我想禁止这个文件夹,因为它充满了技术术语,我认为这些术语会混淆 googlebot 找到的内容关键字 - 还是我也有这个错误?)。
编辑:
我从 googe Robots.txt Specifications找到了这个页面。其中说:“路径中的非 7 位 ASCII 字符可能包含为 UTF-8 字符或按照 RFC 3986 作为百分比转义的 UTF-8 编码字符”。所以我想这个问题的答案是没关系。