研究人员开发了 Hx2Dx ARENA,一个旨在评估大语言模型(LLMs)在对话式临床推理能力的新基准。该基准模拟了诊断的迭代过程,包括病史采集、体格检查和测试解读,使用了来自《新英格兰医学杂志》的 1000 个临床病例。初步评估表明,与一次性提供所有信息的静态评估相比,LLMs 在这种交互式环境中的表现明显较差,凸显了它们在假设驱动的信息收集和知道该问什么问题方面的局限性。 AI
影响 凸显了 LLMs 通过提问收集信息的能力局限性,这是安全集成到临床诊断中的关键一步。
排序理由 该条目描述了一个用于在特定领域评估 LLMs 的新基准和研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- DagsHub
- Federico Ravenda
- Gotit.pub
- Hugging Face
- Hx2Dx
- ScienceCast
- The New England Journal of Medicine
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →