PulseAugur
中
实时 20:35:46
实体 Hit@k

Hit@k

PulseAugur coverage of Hit@k — every cluster mentioning Hit@k across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
  1. RESEARCH · CL_298133 ·

    RAG 评估:衡量检索和答案质量是关键

    评估检索增强生成 (RAG) 系统很复杂,需要评估相关信息的检索质量和生成答案的质量。Hit@K、Recall@K、Precision@K 和 MRR 等指标可以诊断检索器的性能,而答案质量应根据正确性、相关性、完整性和对源上下文的忠实度来判断。虽然基于 LLM 的评估可以加快测试速度,但对于高影响力应用,人工审查仍然至关重要。每当嵌入、分块或提示等组件发生变化时,开发人员都必须重新评估。

  2. RESEARCH · CL_280076 ·

    新研究解决生成式AI内容摄取和推理计算问题

    两篇新的arXiv论文解决了生成式AI部署的关键方面。第一篇论文《面向生成式AI工作负载的智能内容摄取》介绍了一个生产级系统,用于从各种企业文档格式中提取和构建信息,旨在提高下游检索和推理的可靠性。第二篇论文《评估生成式AI的推理计算:企业工作负载的框架》提出了一个评估推理硬件性能和成本效益的框架,特别针对优先考虑每令牌解码延迟和可靠性的代理AI轨迹。一篇相关文章讨论了移动应用中生成式AI的用户期望功能,强调了诸如改进搜索、带来源的可…