Fastino Labs 发布了 GLiGuard,这是一个开源的安全审核模型,旨在比现有解决方案更快、更高效。与逐个 token 生成响应的传统 decoder-only 模型不同,GLiGuard 使用基于 encoder 的架构,在单次传递中对提示和响应进行分类。这种方法使其在运行速度快 16 倍的同时,能够匹配或超越更大模型的准确性,从而解决了 LLM 安全审核日益增长的成本和延迟问题。 AI
影响 为 LLM 安全审核提供了更高效、更快速的替代方案,有可能降低 AI 应用的运营成本。
排序理由 非前沿实验室的开源模型发布。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →