我有一个页面，该页面具有使用this ajaxForm jQuery plugin的形式。表单提交，完成后，将使用$ .get（）进行调用以将一些新内容加载到页面上。
我的问题是，Googlebot“似乎”正在为$ .get（）方法中的URL编制索引。
我的第一个问题是，那可能吗？我给人的印象是Googlebot大部分时间都不评估javascript（我读到一些有关它可以使用！＃索引URL内容的信息）。
我的第二个问题是，如果Google正在将该调用编入该URL的索引中，有没有办法阻止它？
提前致谢。
最佳答案
您可以专门robots.txt该文件，googlebot应该尊重它。
从robotstxt.org：
User-agent: *
Disallow: /~joe/junk.html
Disallow: /~joe/foo.html
Disallow: /~joe/bar.html
您也可以查看Google的Webmaster Central从列表中删除文件。