| (10)由Barry Schwartz |在谷歌搜索引擎优化下文件 Prev故事下故事Tweet分享 Prev故事下故事

谷歌的John Mueller在本周早些时候的hangout中说，他听到很多关于爬行的神话之一，特别是关于seo和网站管理员如何定义或理解爬行预算。他在视频的8点34分说道:“在谷歌，我们并没有像人们在外部谈论的那样拥有爬行预算的概念。”他补充说，在今年年底之前的某个时候，谷歌将发布一篇博客文章，更详细地解释爬行预算。他继续解释说，大多数网站不需要担心这个问题。只有真正的大型网站，那些产生无限数量的页面，才应该考虑他们的服务器如何处理负载。但大多数网站甚至不需要考虑爬行预算。

这是他说的:

我有一堆这样的爬行，忽略你的爬行预算会导致你的网站沉没。所以在谷歌，我们并没有像外界所说的那样有爬行预算的概念。我们希望很快能有一篇关于这个的博客文章，可能是今年晚些时候，更多地解释我们是如何处理爬行的。但在大多数情况下，如果你有一个合理大小的网站，你不必担心这一点。你不需要隐藏内部链接，你不需要在单个页面上乱设索引因为这个页面可能会用完爬行预算或者乱设规范之类的东西对于任何规模合理的网站来说。一旦您的站点有几千个页面大，或者是动态的，并且它们生成无限多的页面，那么显然您需要确保您的服务器能够处理负载。

这很有趣，因为是的，我们最近讨论了两个明显与爬行预算有关的问题。尽管，来自谷歌的Gary Illyes更详细地介绍了爬行预算如何与谷歌一起工作。

论坛讨论在YouTube直播。