实体 MedPIC-Bench

MedPIC-Bench

PulseAugur coverage of MedPIC-Bench — every cluster mentioning MedPIC-Bench across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_183040 · Aug 5 · 04:00

新基准揭示大型语言模型在患者特定药物安全推理方面存在困难

研究人员开发了 MedPIC-Bench，这是一个旨在评估大型语言模型 (LLM) 在特定患者信息基础上进行药物安全推理能力的新基准。该基准包含 467 个问题，用于测试条件规则的应用，对比标准场景和患者数据发生微小变化就会改变安全建议的反事实场景。在测试的 28 个 LLM 中，模型在反事实问题上的表现显著下降，平均准确率从 63.6% 降至 45.1%。这表明，尽管模型能够回忆起药物风险关联，但它们难以可靠地将患者特定条件应用于药…