我只想阻止谷歌在我的网站上爬行一个特定的页面，但我仍然希望其他搜索引擎（首先是百度）爬行它。
我不知道这是否可能。
最佳答案
你需要创建一个robots.txt文件来阻止google的用户代理
//在robots.txt中
User-agent: Googlebot
Disallow: /
User-agent: *
Allow: /
在此处阅读有关robots.txt的更多信息：https://support.google.com/webmasters/answer/6062596?hl=en
关于html - 如何阻止谷歌抓取我的网页，但仍然让百度这样做？，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/56750244/