OAI-AdsBot 与 OAI-SearchBot 的区别
OpenAI 的爬虫家族 2025-2026 间扩到第四条:OAI-AdsBot/1.0 上线,职责是校验 ChatGPT 广告落地页的安全性与相关性,官方明确数据不用于训练——这是 OpenAI 商业化闭环补上的一环,广告主站点的落地页从此多一类例行访客。OAI-SearchBot/1.4 则是引用池的守门人:检索型,专职为 ChatGPT 搜索建索引,官方声明遵守 robots 且不用于训练。两条都不碰训练语料,训练那条线是 GPTBot 的事;AdsBot 的 robots.txt 姿态官方文档未单列说明,配置决策按「未承诺」处理而非默认遵守。
对照表
| 维度 | OAI-SearchBot | OAI-AdsBot |
|---|---|---|
| 职责 | 为 ChatGPT Search 建搜索索引 | 校验 ChatGPT 广告落地页安全性与相关性 |
| 数据去向 | 官方声明不用于训练 | 官方明确不用于训练 |
| 屏蔽后果 | 不进搜索答案(仍可能以导航链接出现) | 官方未单列说明,主要落在广告主落地页校验 |
| 谁该配置 | 所有想进 ChatGPT 搜索的站点 | 在 ChatGPT 投广告的广告主 |
| 真身验证 | openai.com/searchbot.json | openai.com/adsbot.json |
常见混淆
一是把 AdsBot 当新训练爬虫屏蔽——官方明确它不用于训练,屏蔽它改变不了语料立场,反而可能在投放侧添乱;想表态训练,开关是 GPTBot。二是把 AdsBot 当引用入口——它不管自然引用的候选池,那是 SearchBot 加 Bing 信号的事:想让 ChatGPT 搜到你,放行 SearchBot 并做好 Bing 收录(实测引用与 Bing 首页约 87% 重合,未复验口径),缺一条腿链路就静默断一环。三是三条爬虫一个开关——GPTBot(训练)、OAI-SearchBot(检索)、OAI-AdsBot(广告校验)各写各的具名组,* 组对它们一概不生效。
选用建议
搜索线按老三样推进:放行 OAI-SearchBot、Bing WMT 加 IndexNow 推送、日志里按 UA 加官方 IP 段验真身——ChatGPT 的引用窗口窄(平均约 7.9 源),资格解决之后位次靠内容可摘录性按月积累,两种节奏别压进同一份周报。广告线把 AdsBot 到访写进爬虫台账当例行访客记录,投放前自查落地页与广告描述的一致性——它校验的就是这一层。家族名单与验证端点见AI 爬虫全景档案表,分组语法见robots.txt AI 配置矩阵,SearchBot 档案与日志验证方法见OAI-SearchBot 术语卡;训练与检索的取舍另见GPTBot 与 OAI-SearchBot 的区别。