一个名为 ProxyDrift 的新框架已被开发出来,用于解决在不直接访问敏感用户数据的情况下监控和适应大规模 LLM 应用的挑战。该系统利用非 PII(个人身份信息)代理表示,这是从基于 LLM 的用户交互分类中派生出的结构化描述符,来检测和衡量数据漂移。ProxyDrift 还支持构建和刷新离线评估集,确保在保护用户隐私的同时进行持续监控和有针对性的合成数据生成。实验表明,合成查询与真实查询具有很强的一致性和不可区分性,并且与生产流量高度一致。 AI
影响 能够在不损害用户隐私的情况下,对大规模 LLM 部署进行持续监控和适应。
排序理由 该集群包含一篇详细介绍 LLM 应用新框架的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →