研究人员开发了一个新框架,用于审计网络系统如何从包括LLM生成的配置文件在内的各种数据源推断用户偏好。该框架区分了点识别、部分识别和弃权,旨在揭示测量过程本身,而不仅仅是偏好。在基准数据集和一项亚马逊研究上的实验表明,中位数聚合在减少符号误差和与拟合曲面一致性方面是有效的,尽管潜在偏好的完全恢复受到比较器校准的限制。 AI
影响 这项研究可能带来更透明、更可靠的方法,以理解在利用LLM进行偏好推断的网络系统中的用户行为。
排序理由 该集群包含一篇在arXiv上发表的研究论文,详细介绍了用于LLM用户偏好推断的新审计框架。[lever_c_demoted from research: ic=1 ai=1.0]
在 arXiv cs.IR (Information Retrieval) 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →