OpenAI、Google、Microsoft、Anthropic 将采用统一的 AI 抓取退出标准

报道讲了什么

• OpenAI、Google、Microsoft 和 Anthropic 表示将采用一项让发布方退出 AI 抓取的新标准。
• 该共享信号由 Anthropic 标准技术负责人 Kevin Kelley 作为 IETF 工作的一部分提出。

可以做什么

• 发布方可在 robots.txt 中一次性表达面向多家 AI 公司的训练偏好，而非逐家设置。
• 四家公司称遇到该共享令牌时会限制自家 AI 爬虫访问该站点。
• Microsoft 额外提供更细粒度控制，可分别退出 AI 训练或 AI grounding。

怎么使用

原文没有提供可复现的操作步骤，请从下方原文或官方说明确认使用方法。

结果与限制

• 目前仅 Anthropic 已采用，Google 和 Microsoft 计划明年支持，OpenAI 称将在未来几个月实施。
• Microsoft 表示无论偏好如何，网站仍会出现在 Bing 搜索结果中。

使用入口与依据