什么是 IndexNow ?
IndexNow 是一种让网站所有者立即能够将其网站的最新内容更改告知搜索引擎的协议。它协助搜索引擎及时了解一个 URL 及其内容是否有添加、更新或删除事件发生,以便搜索引擎爬虫能够及时抓取页面更新索引,最终影响搜索引擎调整更新搜索结果
*IndexNow (https://www.indexnow.org/) 由 Microsoft(Bing)与 Yandex 搜索引擎合作编定
什么是 Crawler Hints(爬虫提示) ?
一项由Cloudflare提供的功能服务,旨在改善搜索引擎过度抓取问题,帮助搜索引擎确定有效爬行抓取周期频率,降低搜索引擎无效抓取,最终减少用户(站长)、搜索引擎以及Cloudflare自身的资源消耗,在一定程度上减少整个互联网资源浪费、能源消耗
Crawler Hints(爬虫提示)如何工作? (https://blog.cloudflare.com/crawler-hints-how-cloudflare-is-reducing-the-environmental-impact-of-web-searches/)(英)
使用
面板上,缓存管理页,一键启用 Crawler Hints
*面向所有Cloudflare用户,免费开放使用
Cloudflare Supports IndexNow and Announces General Availability