我有一些页面名index2.php，index3.php，…
它们是index.php的副本，用于测试
我是否应该禁止robots.txt中的这些页面，因为有双重内容？
或者这不重要，因为这些网页没有链接到我的网站上？
如果我因为双重内容而被谷歌惩罚，那有多糟糕？
最佳答案
欺骗的内容或任何能打倒你的东西，都很难从中恢复过来。总的来说，我认为这取决于你对你的网站/服务做了什么。如果这一切都是关于内容的，那么它在某种程度上会有影响。一旦谷歌和其他引擎将你列在一个域名池中，用于欺骗内容或其他可能的标志，这将是一种错误地提升你的排名的企图，要从这个域名池中脱身是很困难的。这就像信任，一旦你失去了对某人的信任，他们很难重新获得信任。
很难说，我认识一些人，他们几个月来一直在试图解决类似的问题，我也认识一些人，他们在一周内就解决了这个问题。
同样，这一切归结为您的站点/服务正在做什么，以及它是如何做的。这么多的因素，不仅仅是一个会杀死..
至于整个机器人发短信的事情，如果你的那方面去做，没有什么坏处。像谷歌这样的引擎会注意机器人的文字，并给予足够的尊重。没有它，尽管谷歌和其他引擎没有直接链接，但有时会找到找到它的方法。我有整个子域名从来没有被公众看到，最终在搜索引擎中被索引，我有你最淫秽的文件名从来没有被公开链接，最终在搜索引擎…它的成败