最近关于谷歌算法更新的信息引起了许多情绪反应。说实话，有用的内容对网站排名的影响还有待发现。但是，网站索引和抓取预算的情况有所不同。毫无疑问，后者并不像有用的内容更新那样神秘。
在 Google Search Central 播客中，Gary Illyes 和 Martin Splitt 澄清了对 Crawl Budget 的常见疑虑和误解。这是他们所说的。
谁提出了抓取预算？
有趣的是，根据 Garry Illyes 的说法，Crawl Budget 的概念来自 Google 用户本身。当关于它的嗡嗡声越来越大时，抓取预算只是几个指标的结果——它不是处理一个目的的算法或规则。
加里 说：
…在很长一段时间里，我们一直在说我们没有抓取预算的概念。这是真的[…]。然后我们与两三个或四个团队合作——我不记得了——我们试图提出至少一些内部指标，这些指标可以映射成人们在外部定义为抓取预算的东西。
谷歌的抓取预算是多少？
考虑到 Garry 所说的话，抓取预算似乎取决于一些实际指标。其中一些包含有限数量的 URL，Googlebot 可以编制索引而不会使内存过载。
Gary Illyes 和 Martin Splitt 也证实，这是将 Crawl Budget 定义为 Googlebot 可以在给定网站上编制索引的 URL 数量的原因之一。
如果您想了解更多关于抓取预算的信息，请阅读我们的博客文章：如何优化抓取预算
不久之后，这两个人发布了一条推文，称有些在线内容不适合索引。原因很简单。通过这样做，为用户实际相关和有用的内容留出了更多空间。他们还透露，谷歌没有索引，也从未索引过互联网上发布的每一条内容。谷歌的存储容量是有限的，所以机器人不能索引人们放在他们网站上的所有东西。
关于索引我们的网站，我们应该知道什么？
就像抓取预算一样，所有与索引和非索引相关的不安全感都来自谷歌用户。Gary 和 Martin 指出，大多数网站所有者——超过 90%——根本不应该担心。他们补充说，这些担忧主要是由错误信息引起的，以及一些人必须控制无法控制的事情的冲动。
Google 如何区分符合索引条件的网站？
听完播客后，人们可能会得出这样的结论，即有一些因素有利于一项内容而不是另一项内容。当Google 收到信号（例如网站收到的反向链接的数量）表明特定内容很有价值，或者当主题在用户中很受欢迎时，就会发生这种情况。
如果您想了解更多信息，请收听 Google 的播客：
