更改 Googlebot 抓取速度

抓取速度是指 Googlebot 在抓取网站时每秒向网站发出的请求次数,例如每秒发出 5 次请求。

您无法更改 Google 抓取网站的频率,但如果您希望 Google 抓取网站上的新内容或更新后的内容,可以请求重新抓取

正确用法

Google 采用先进的算法来确定最佳的网站抓取速度。我们的目标是,每次访问您的网站时,在不导致您的服务器带宽过载的情况下尽可能多地抓取网页。

如果 Google 每秒向网站发出的请求过多,导致服务器的速度下降,您可以限制 Google 抓取您网站的速度。

您可以限制对根级网站(例如 www.example.com 和 http://subdomain.example.com)的抓取速度。您设置的抓取速度是 Googlebot 的抓取速度上限。请注意,Googlebot 并不一定会达到这一上限。

除非您发现服务器出现负载问题并确定该问题是由于 Googlebot 过于频繁地访问您的服务器导致的,否则我们建议您不要限制抓取速度。

您无法更改对非根级网站(例如 www.example.com/folder)的抓取速度。

限制抓取速度

  1. 打开资源的“抓取速度设置”页面
    • 如果抓取速度是“计算出的最佳速度”,那么降低抓取速度的唯一方式是提交特殊请求。您无法提高抓取速度。
    • 否则,请选择相应选项,然后根据需要限制抓取速度。新抓取速度的有效期为 90 天。

 

该内容对您有帮助吗?
您有什么改进建议?