PulseAugur
实时 22:45:34
English(EN) Cloudflare to block cynical search-and-scrape bots from ad-supported web pages

Cloudflare 将阻止 AI 数据抓取机器人抓取网页 · 跟踪 1 个来源

Cloudflare 正在实施新措施,以阻止抓取广告支持网页以获取数据的机器人,特别是那些用于 AI 训练的机器人。此举旨在保护内容创作者免受未经授权的数据收集。然而,该公司承认区分合法的搜索引擎爬虫和 AI 数据收集机器人可能很困难,如果某些网站被阻止,可能会影响它们在搜索结果中的可见性。 AI

影响 此政策变化可能会影响可用于 AI 训练的数据,并可能影响搜索引擎对网站的索引方式。

排序理由 这是来自一家安全公司关于他们将如何处理某些类型机器人的产品公告。

在 The Register — AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

Cloudflare 将阻止 AI 数据抓取机器人抓取网页 · 跟踪 1 个来源

报道来源 [1]

  1. The Register — AI TIER_1 English(EN) ·

    Cloudflare to block cynical search-and-scrape bots from ad-supported web pages

    Some crawlers gather data for both search and AI training, so when publishers block them to protect content they risk disappearning from search results ...