谷歌:不尝试404页不是爬行问题的迹象•2017年5月12日早上7:45 |(2)由Barry Schwartz|在谷歌新闻和金融Prev故事下一个故事推特分享Prev故事下一个故事

前两天我报道谷歌爬行404后其他页面所以没有爬行预算牺牲。于是我有点开玩笑地问道:“那么，404的激增可能意味着你的网站有一些优秀的爬行预算支出?”

无论如何，似乎其他人也问了David Iwanow问的问题，如果谷歌不尝试你的404，这是一个爬行问题的迹象吗?谷歌的约翰·穆勒说不是的。以下是推特:

@davidiwanow @miguelpau @davidwkelley @ googllewmc no

– John .o(≧▽≦)o。(@JohnMu) 2017年5月11日所以，如果谷歌没有尝试你的404，不要惊慌，这不是一件坏事。

道恩·安德森随后在Twitter上提醒我，约翰一年前就讨论过这个话题。在一段27分钟左右的视频中，他谈到了这一点。在视频进行到30:49的时候，约翰说:

是的，我的意思是通常我们用这个来填满我们多余的容量。我们说，我们已经从这个网站上抓取了所有重要的url。我们知道我们可以再爬一万多个网址。所以让我们再检查一下列表上的其他东西，以确保我们没有遗漏任何东西。

所以你不会因为我们不抓取这些url而失去任何东西也不会因为我们不抓取这些url而得到任何东西。这实际上是我们的系统在说，这里有这么多的积压我们不知道该怎么处理，所以我们在有多余时间的时候再检查一下。

如果谷歌有额外的容量，他们就会去做。如果不是,不是。

论坛在Twitter上讨论。