Claude
8 张相关卡片
Glenn Gabe 多语言实测:AI 平台频繁返回美式英文版
G-Squared Interactive 2025-12 实测:法/意/西语查询下 ChatGPT、Perplexity、Claude 频繁返回美式英文版页面,hreflang 对其他 AI 平台疑似无效。
TollBit State of the Bots:AI 抓取与引用监测报告
内容变现平台 TollBit 基于数百亿次交互的厂商遥测(2025-12):AI 引用链接 404 率分厂商时间序列,2025Q2-Q4 无视 robots.txt 的 AI bot 增长约 400%。
ClaudeBot 是少数官方支持 Crawl-delay 的大厂 AI 爬虫
Anthropic 官方文档:ClaudeBot 遵守 robots.txt 且支持 Crawl-delay——在 Google 明确不支持 crawl-delay 的背景下,这是大厂 AI 爬虫里的少数派。
从 OpenAI 换等量流量比十年前的 Google 难约 750 倍
Cloudflare 官方口径(2025-07):从 OpenAI 获得与当年 Google 等量的流量难约 750 倍,从 Anthropic 难约 3 万倍——"爬取慷慨、引荐吝啬"的量化。
GPTBot 下载 11.5% 的 JS、ClaudeBot 下载 23.84%,但都不执行
searchviu 同一实测的细节:GPTBot 下载 JS 占请求 11.5%、ClaudeBot 占 23.84%,均无执行环境、当静态文本处理——下载 JS 不等于渲染页面。
AI 引用链接 404 率:Anthropic 曾达 55%,Perplexity 1.16% 最佳
TollBit 数百亿次交互监测(2025-12):引用链接 404 率 Anthropic 从 55%(2024Q2)降至 4.8%,Perplexity 1.16% 最准,OpenAI 从 0.3% 恶化至 3.7%。
ChatGPT/Claude 抓取超 34% 以 404 结束,Googlebot 约 8%
Vercel 研究口径(2024-12):ChatGPT 与 Claude 的抓取请求超 34% 以 404 结束,Googlebot 约 8%——AI 靠推断/重构 URL 而非沿链接图爬行。
Claude 搜索
Anthropic 的网页搜索:ClaudeBot/Claude-User/Claude-SearchBot 三 UA 职责分离、遵守 robots、官方提供 bots.json 核验清单,是六引擎中治理最规范的一家;搜索供给指向 Brave,中文覆盖弱源于索引而非模型。