Linux内核的Git仓库正经历滥用网络爬虫的显著增加,消耗的CPU资源比合法访问还多。Konstantin Ryabitsev指出,五个节点上的14个CPU核心专门用于渲染这些爬虫的提交。此问题也影响了其他网络服务,例如Simon Willison的Datasette,它服务于许多可爬取的页面。 AI
影响 滥用爬虫消耗大量资源可能会影响网络服务的可访问性和性能,包括那些服务于AI相关内容或工具的网络服务。
排序理由 该条目讨论了一个技术问题及其潜在影响,并引用了一位开发者的评论。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →