Search Engine Roundtable· barry@rustybrick.com (Barry Schwartz)·· 23 小时前AI 评分12
Google 搜索抓取速率文档新增 Retry-After HTTP 头说明
Google Search Crawl Rate Doc Adds Retry-After HTTP & More
AI 导读
Google 更新了"降低 Google 抓取速率"文档,重构紧急降低抓取速率章节,并新增 Retry-After HTTP 头的说明与示例。返回 503 或 429 状态码时,网站可附带 Retry-After 头(依据 RFC 9110),用秒数延迟或绝对 UTC 日期时间告知 Google 爬虫何时可重试。该机制并非新增,此前已记录在"暂时暂停或停用网站"文档中。
来源:Search Engine Roundtable · seroundtable.com