EarlyDx

新基准 EarlyDx 测试 AI 从有限临床数据中进行诊断推理

研究人员开发了 EarlyDx，这是一个旨在评估 AI 模型在仅有有限的入院时临床数据的情况下生成诊断能力的基准测试。与之前的基准测试不同，EarlyDx 使用自由文本记录，并根据急诊就诊而非完整的住院过程来监督诊断。LLM 审计员会验证支持每项诊断的证据，评估仅关注完全支持的标签。包括专门的医疗模型和通用的前沿模型在内的当前模型，在从入院时证据中可靠推断诊断方面存在困难，零样本模型表现不佳，即使是经过后训练的系统在推断召回率方面也存在显著差距。