我读过一篇文章，教如何让搜索引擎机器人可以抓取我的 ajax 页面，当我使用片段 url #! 时它工作得非常好，但现在我正在尝试创建一个没有片段的“主页”使用下面的元标记：
<meta name="fragment" content="!" />
我正在使用下面的代码片段来了解 googlebot 发生了什么。
<?php
if( isset( $_GET['_escaped_fragment_'] ) )
{
echo "Crawler is gonna read that page!";
}
?>
事实是机器人在 _escaped_fragment_ 语句中没有返回任何值。
这是该页面的链接：http ://www.linkerama.com/novo/
当我使用浏览器时，这个返回一个值：http ://www.linkerama.com/novo/?_escaped_fragment_=
你如何测试这个？如果您使用的是“Fetch as Google”，请阅读下文。
John Mueller（谷歌员工）从http://productforums.google.com/forum/#!category-topic/webmasters/crawling-indexing--ranking/bZgWCJTnl08%5B1-25%5D引用
查看您博客的主页，要记住的一件事是 Fetch as Googlebot 功能不会解析它获取的内容。因此，当您提交 toddmoyer.net/blog/ 时，它会获取该 URL。获取 URL 后，它不会解析它以检查“片段”元标记，它只是将它返回给您。但是，如果您获取 toddmoyer.net/blog/#! ，然后它应该重写 URL 并获取 URL toddmoyer.net/blog/?_escaped_fragment_= 。
当我们抓取您的网页并将其编入索引时，我们会注意到元标记并采取相应措施。它只是 Fetch as Googlebot 功能，它不检查元标记，而只是返回原始内容。
希望有帮助。