Applebot
PulseAugur coverage of Applebot — every cluster mentioning Applebot across labs, papers, and developer communities, ranked by signal.
3 天有情绪数据
-
AI爬虫正在检查llms.txt，但更偏爱Markdown副本
AI可见性普查（AI Visibility Census）的一项新研究追踪了三天的服务器日志，以了解AI爬虫是否正在访问一个提议的文件格式llms.txt。日志显示，Googlebot、GoogleOther和ClaudeBot发出了对llms.txt或相关文件llms-full.txt的请求，而Bingbot和Applebot则没有。然而，这些相同的爬虫抓取该网站页面的Markdown副本的频率要高得多，这表明虽然一些AI机器人正在…
-
网站实现 87% 代理就绪度，AI 引用量月增至 39k
一位网站所有者报告称，其网站的“代理就绪得分”从 20 大幅提升至 87。这一改进使每月获得的 AI 引用量达到约 39,000 次，其中 Applebot、Baidu 和 Google 等主要 AI 机器人是访问频率最高的阅读者。该测试旨在评估 AI 机器人查找、阅读和理解网站内容及产品的能力，以期增加在 AI 生成答案中的引用。
-
分析显示，AI爬虫流量常伪造身份 · 跟踪到1个来源
对2026年10月一周内四个新小型网站的服务器日志进行的最新分析显示，声称来自GPTBot和ClaudeBot等AI爬虫的流量中，有很大一部分源自未与这些爬虫官方发布者关联的IP地址。虽然一些差异可能归因于IP列表更新延迟，但发现一个托管网络伪造了八个不同的AI爬虫身份。分析强调，用户代理字符串仅仅是声明，通过IP地址或反向DNS查找来验证爬虫身份对于准确的网站分析和访问控制至关重要。
-
Cloudflare 功能阻止 AI 训练机器人，同时允许搜索引擎
Cloudflare 推出了新功能，使网站能够阻止 AI 机器人将其内容用于训练目的。此功能允许发布者阻止 AI 数据抓取，同时确保合法的搜索引擎爬虫（如 Googlebot 和 Applebot）仍可访问该网站进行索引。这一发展解决了内容创作者对未经授权使用其数据进行 AI 模型训练日益增长的担忧。
-
苹果更新Applebot规则以用于AI训练
苹果公司已更新其Applebot网络爬虫指南，以纳入针对AI训练数据的新控制措施。这些变更将于2026年6月8日生效，旨在让出版商在他们发布的内容如何被用于训练包括驱动Siri在内的AI模型方面拥有更大的发言权。此次更新还详细说明了有关摘要和爬取行为的新规则。
-
Applebot 规则更新以支持 AI 训练控件
Apple 已更新其 Applebot 网页爬虫文档，加入了新的 AI 训练控件。这些更新将于 2026 年 6 月 8 日生效，允许出版商指定其内容是否可用于训练 Apple 的 AI 模型（例如驱动 Siri 的模型）。此次更改还引入了关于摘要和爬虫行为的新规则。
-
AppleBot 文档更新，涉及 AI 内容和抓取
Apple 更新了其 AppleBot 文档，以阐明其抓取和索引行为。更新内容特别说明了 AppleBot 如何处理 AI 生成的内容，包括对“no snippet”指令和 X-Robots-Tag 的控件。此外，文档现在详细说明了 crawl-delay 设置和网络爬虫的可访问性注意事项。
-
Applebot 将阻止使用付费墙和非 HTML 内容进行 AI 训练
Apple 已更新其网络爬虫 Applebot 的指南。该公司现在明确表示，Applebot 可以拒绝使用非 HTML 内容和付费墙后的内容来生成 AI 回复。此举旨在让 Apple 更好地控制其数据如何用于 AI 训练。