研究人员开发了一种名为KBF(知识边界作为指纹)的新方法来审计大型语言模型API。该低成本协议利用知识边界附近的数值召回率来识别API是否正在服务所宣传的模型。在对16个生产LLM端点的测试中,KBF成功标记了所有经济相关的替换,并在部署变化下保持稳定。审计还显示,六个平台中的27个平台模型单元中有七个表现出与参考端点相比统计上不一致的行为,其中这些不一致性尤其集中在高级Claude端点上。 AI
影响 这种新的审计方法可以提高LLM API使用中的透明度和信任度,可能影响开发人员和用户与AI服务交互和验证的方式。
排序理由 该集群描述了一篇介绍语言模型API审计新方法的最新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →