研究人员推出WISE,一个代理框架,旨在诊断和归因算法驱动服务(特别是工业搜索)中低质量结果的原因。该框架旨在弥合当前监控实践的差距,将质量评估从识别问题扩展到追踪其在系统组件中的起源。WISE包含用于证据一致性轨迹监督的ReTrace和用于故障引导优化的自适应 Harness-策略优化(AHPO),并在多模态搜索基准WISE-BENCH上进行了评估。实验证明了WISE的有效性,在Qwen3.5-35B-A3B上达到了75.20%的准确率,并支持质量审计和模型优化等生产用例。 AI
影响 引入了一个新颖的框架,用于诊断和归因搜索结果不佳的根本原因,可能提高AI系统的可靠性和相关性。
排序理由 该集群包含一篇研究论文,介绍了一个用于信息检索中系统质量诊断的新框架和基准。[lever_c_demoted from research: ic=1 ai=1.0]
在 arXiv cs.IR (Information Retrieval) 阅读 →
- Adaptive Harness-Policy Optimization
- arXiv
- Hugging Face
- Qwen3.5 35B A3B
- Retrace
- System Quality Diagnosis
- WISE
- WISE-BENCH
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →