网站站主正日益艰难地应对机器人流量激增的问题,一些人报告称其网站访问量的 99% 以上来自自动化来源。一位人士发现,每有一个人类访客,AI 抓取器就会访问其网站约 214 次,其中像 Anthropic 的 Claude-SearchBot 这样的特定 AI 机器人发出了过多的请求,但并未产生任何人类流量。虽然 Cloudflare 等服务提供了阻止或挑战可疑机器人活动的工具,但完全阻止自动化访问仍然是一个重大挑战,这使得一些人考虑采用‘按次抓取付费’等新模式来解决机器人抓取成本的问题。 AI
影响 加速了对新的网络流量管理策略和内容潜在货币化模式的需求。
排序理由 机器人流量显著增加,影响网站站主,并讨论了潜在的解决方案。
在 Mastodon — fosstodon.org 阅读 →
- Amzn-SearchBot
- Anthropic
- Bingbot
- Chrome DevTools MCP
- Claude-SearchBot
- Cloudflare
- Googlebot
- Mastodon
- Nick Gray
- PatronView
- Claude-User
- Kaka Ruto
- Mashable
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →