Nick Gray

AI抓取器产生99%的网站流量，压倒人类访客

一位网站运营商详细描述了与AI抓取器的持续斗争，报告称其网站流量的99%以上来自机器人。该运营商发现，每有一个人类访客，像Anthropic的Claude-SearchBot这样的AI抓取器会发起大约214次页面请求。这种大量的抓取，特别是来自Claude-SearchBot和Amzn-SearchBot等来源的抓取，并未产生任何可识别的人类访客，促使运营商实施严格的防火墙规则和挑战来阻止无贡献的AI流量。