据 Shoal Research,交易机器人约占 Cloudflare 网络上 HTML 内容 HTTP 请求的 60%,而人类占 38.2%。Cloudflare 首席执行官 Matthew Prince 曾预测,交易机器人流量将在 2027 年超过人类流量;该平台最近确认,代理流量增长已经实现了这一反超。

与 Googlebot 相比,ClaudeBot 的抓取与再访问比率更高,过去一年平均每次再访问抓取约 4,200 个页面。Pew 的研究显示,AI 生成的摘要已将点击率从 15% 降至 8%,因为 AI 应用会将用户留在聊天界面内,而不是将流量引导回源网站。