Google、OpenAI 和 Anthropic 正在采用新的 robots.txt 指令来控制 AI 训练数据抓取。该指令由 Anthropic 的 Kevin Kelley 提出,`__usage_ai-training` 用户代理将向 AI 公司发出信号,表明哪些网站不希望其内容被用于训练生成模型。虽然这可以防止未来的抓取,但不会影响已收集的数据。Microsoft 和 Google 计划在 2027 年初实施此项,而 OpenAI 将在未来几个月内采用。 AI
影响 为 AI 公司尊重网站所有者数据使用偏好建立通用标准,可能影响未来的训练数据集。
排序理由 主要科技公司采纳新的数据抓取行业标准。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →