| (61) by Barry Schwartz |在谷歌搜索引擎优化Prev故事下故事推特分享 Prev故事下故事

有很多方法来控制谷歌如何爬行你的网站，但其中之一不是noindex标签。谷歌仍然会抓取带有noindex标签的网站和网页。它需要索引，这样才能知道哪些是不应该索引的。您可以使用robots.txt、nofollow和其他方法来尝试减缓或阻止谷歌拾取的内容，但不能使用noindex标记。

谷歌的John Mueller在推特上再次表示，“noindex是一个索引指令，它不控制爬行。”

@s17pur noindex是一个索引指令，它不控制爬行。

——约翰·. o(≧▽≦)o。

谷歌有一个很大的帮助部分，关于如何控制你的网站的爬行。所以要仔细阅读细节。

论坛在Twitter上讨论。