OpenAI、谷歌、微软、Anthropic 支持新标准,让出版商一次性拒绝 AI 抓取
2026.10.31 · 收录日 2026.10.31 · 事件 · 行业动态 · 媒体报道
四大 AI 公司同意采用 robots.txt 中的共享“政策令牌”,出版商可一次性声明 AI 训练偏好。
OpenAI、谷歌、微软和 Anthropic 表示将采用一项新标准,让出版商通过 robots.txt 中的共享“政策令牌”一次性表达 AI 训练偏好,而不必逐家设置。该信号由 Anthropic 标准技术负责人 Kevin Kelley 在 IETF 提出。Anthropic 已采用,谷歌和微软计划明年支持,OpenAI 称将在“未来几个月”实施。
- OpenAI、谷歌、微软、Anthropic 将采用共享“政策令牌”,出版商可一次性向多家 AI 公司表达 AI 训练偏好
- 该信号由 Anthropic 标准技术负责人 Kevin Kelley 在 IETF 提出,将写入网站的 robots.txt 文件
- 遇到该令牌时,四家公司将限制其 AI 爬虫访问该网站;微软还将提供更细粒度控制,可分别退出 AI 训练或 AI grounding
- 微软表示无论偏好如何,网站仍会出现在 Bing 搜索结果中;Anthropic 已采用,谷歌和微软计划明年支持,OpenAI 称未来几个月实施
为什么值得看
AI 抓取与内容授权矛盾加剧,这一标准可能改变出版商的谈判与防护方式。
适合谁关注
关注 AI 版权、内容授权、爬虫治理的出版商、开发者与从业者。
