PulseAugur
中
实时 21:36:37
English(EN) Creepy crawlies — Konstantin Ryabitsev on AI scrapers hammering git.kernel.org. 14 CPU cores across 5 geo-distributed nodes are constantly rendering commits for

Kernel.org 遭遇消耗数百万每日请求的 AI 爬虫 · 跟踪 2 个来源

作者 PulseAugur 编辑部 · [2 个来源] ·

Kernel.org 正在经历 AI 爬虫流量的显著激增，每天数百万的请求压垮了其基础设施。这些机器人，其中一些采用 Anubis 工作量证明，正在消耗大量资源，一份报告指出，跨五个节点的 14 个 CPU 核心专门用于为爬虫渲染提交。尽管努力阻止这些爬虫，但仍有大量爬虫绕过了防御，导致数十亿的重复 URL 请求，而不是高效的代码克隆。 AI

影响 AI 爬虫正日益给 Web 基础设施带来压力，需要超越传统机器人阻止的新防御机制。

排序理由 该集群描述了由 AI 爬虫引起的基础设施压力，而不是核心 AI 发布或研究。

在 Mastodon — mastodon.social 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

Kernel.org 遭遇消耗数百万每日请求的 AI 爬虫 · 跟踪 2 个来源

本文如何被排名

Signal score
0 / 100
Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket
Tool
该集群描述了由 AI 爬虫引起的基础设施压力，而不是核心 AI 发布或研究。
Source corroboration
2 independent sources
Multiple independent publishers reporting the same story raises confidence that it's real and newsworthy.
Topics
infra
Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance
High
Clearly on-topic for AI-industry coverage.
Story freshness
3 days old
Aged out of breaking-news scoring windows; ranking reflects the durable signal from the full source set.

完整方法见我们的编辑标准。

报道来源 [2]

  1. Mastodon — fosstodon.org TIER_1 English(EN) · [email protected] ·

    🐧 Kernel.org 与每日数百万请求的 AI 爬虫展开斗争 ｢ 负责 Kernel.org 基础设施的 Konstantin Ryabitsev 表示，git.kernel.org g

    🐧 Kernel. org Battles AI Crawlers Generating Millions of Daily Requests ｢ Konstantin Ryabitsev, who helps run Kernel.org’s infrastructure, says git.kernel.org gets about 6 million requests each day for individual commit pages. Anubis proof-of-work blocks about two-thirds, but man…

    链接 linuxiac.com/kernel-org-battles-ai-crawle…
  2. Mastodon — mastodon.social TIER_1 English(EN) · [email protected] ·

    令人毛骨悚然的爬虫——Konstantin Ryabitsev谈AI爬虫正在猛烈攻击git.kernel.org。分布在5个地理位置节点的14个CPU核心正在持续渲染提交信息

    Creepy crawlies — Konstantin Ryabitsev on AI scrapers hammering git.kernel.org. 14 CPU cores across 5 geo-distributed nodes are constantly rendering commits for scrapers, ~20% of total capacity. Bots now solve Anubis proof-of-work and still pull billions of duplicate commit URLs …

    链接 people.kernel.org/…/creepy-crawlies people.kernel.org/monsieuricon

相关实体

相关话题