Cloudflare 新默认生效：Training 与 Agent 爬虫收紧

2026 年 9 月 15 日，Cloudflare 的新默认策略正式生效：在展示广告的页面上，训练类（Training）与 Agent 类爬虫默认被阻断。这项变化于 7 月下旬宣布（TechCrunch 等 2026-07-27 前后报道），给了站长约七周的调整窗口。至此，Cloudflare 的政策链条完成三级跳：2025-07 新域名默认阻断 AI 爬虫（可退出）→ 2026-07-01 控制粒度按用途分项 → 2026-09-15 默认值按用途收紧——托管全球超两成 Web 域名的平台上，“不表态”的内容对训练与 Agent 用途的默认可达性被系统性下调。

对依赖广告变现的内容站，这是 Cloudflare 替它们做的默认谈判：AI 公司要拿这些内容训练或让 Agent 调用，需要通过付费或认证机制获得显式许可。

GEO 含义

“什么都不配 = 全都开放”的时代结束：显式声明从最佳实践变成入场券——没有明确 robots 与用途声明的站点，其内容进入训练语料与 Agent 调用的路径会被基础设施层默认收窄。政策链细节见Cloudflare 内容独立政策卡，配置动作见爬虫访问控制档案，三类爬虫的口径见爬虫三类用途术语卡。