OpenAI 将遵循 robots.txt 通用信号,简化网站表达 AI 训练偏好
2026.10.30 · 收录日 2026.10.30 · 事件 · 行业动态 · 官方发布
网站可用一个共享信号同时向多家 AI 提供商表达内容训练偏好,无需逐家配置。
OpenAI 宣布将遵循 robots.txt 中的一项通用信号,让网站一次性向多家参与提供商表达内容是否可用于基础生成式 AI 训练。此前网站需逐个识别爬虫并分别维护规则,该信号将在未来几个月内实施,且不取代现有爬虫控制。
- OpenAI 将遵循 robots.txt 中的一项通用信号,用于表达内容是否可用于基础生成式 AI 训练
- 该信号让发布者和网站运营者一次向多个参与提供商传达同一偏好,减少逐家维护规则的工作
- OpenAI 计划在未来几个月内实施该信号,届时会公布实施细节
- 新信号不会取代现有 robots.txt 爬虫控制,原有控制继续适用并被尊重
- 该工作基于 IETF AI Preferences 工作组,OpenAI 鼓励其他 AI 提供商也遵循该信号
为什么值得看
网站管理内容训练授权的方式可能因此简化。
适合谁关注
网站运营者、内容发布者及关注 AI 数据合规的人。
