Cloudflare 推出了 Bot Preference Sync,一项旨在协调 robots.txt 指令与特定 AI 机器人配置的新功能。此工具允许网站所有者管理搜索引擎爬虫、AI 代理和机器学习模型训练流量如何与其内容进行交互。该服务对所有 Cloudflare 客户开放,无论其订阅级别如何。 AI
影响 为网站所有者提供对 AI 机器人访问的精细控制,可能影响模型训练和搜索索引的数据收集。
排序理由 推出用于管理 AI 机器人流量的工具的产品。
在 Mastodon — fosstodon.org 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →