来自 Meta 和 Alibaba Group 的 AI 爬虫几乎导致了志愿者运营的 LGBT History Project（自 2011 年以来浏览量超过 5000 万）瘫痪。大量的机器人流量显著减慢了网站速度并增加了运营成本。该档案库已被大英图书馆保存，但由于此次抓取活动，其可访问性面临严重威胁。 AI
影响 AI 网络抓取行为对数字档案库和志愿者运营的项目构成了威胁，需要更好的机器人管理和内容保护策略。
排序理由 该集群描述了 AI 爬虫对特定网站的影响，符合“工具”类别，因为它详细说明了 AI 技术（爬虫）的使用及其对非 AI 焦点实体的影响。
在 Mastodon — mastodon.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →
Fast Company: AI crawlers from Meta and Alibaba almost destroyed a volunteer-run LGBT history archive. “…the LGBT History Project… recently passed 50 million views since its launch in 2011 and has been archived by the British Library for posterity. But an onslaught of AI bots see…
AI crawlers from Meta and Alibaba almost destroyed a volunteer-run LGBT history archive https://www.fastcompany.com/91589354/ai-crawlers-hammered-a-volunteer-run-lgbt-history-archive-2 # AI # Tech # Community