解读 Google 抓取预算：Googlebot 抓取机制、限额与管理方式

Google 将抓取预算定义为爬虫在特定时间内能够且愿意抓取的 URL 数量，由抓取容量上限和抓取需求两部分决定。2026 年 2 月 6 日起 Googlebot 单 URL 抓取上限从 15MB 降至 2MB，PDF 仍为 64MB；Google 在 2024 年 1 月 8 日移除了已存在十余年的抓取速率限制工具。