LLM-FACETS

新的大型语言模型评估框架优先考虑隐私和可访问性

研究人员开发了 LLM-FACETS，这是一个开源框架，旨在使评估大型语言模型（LLM）更加便捷且注重隐私保护。该系统具有浏览器可访问的界面和为技术专家、领域专家及合规官量身定制的插件架构，符合欧盟人工智能法案等框架。LLM-FACETS 通过可视化不确定性的对数概率、使用多裁判共识以及采用 RAG Triad 指标来检测幻觉，从而实现透明度，同时确保数据保留在自托管服务器内。