PulseAugur
中
实时 11:52:58
English(EN) Large Language Models Lack Temporal Awareness of Medical Knowledge

新基准揭示大型语言模型在医学知识方面缺乏时间感知能力

作者 PulseAugur 编辑部 · [1 个来源] ·

研究人员开发了 TempoMed-Bench，这是一个旨在评估大型语言模型（LLM）在医学领域的时间感知能力的新基准。现有的评估常常忽略医学知识的动态性，因为医学知识会随着新证据和治疗方法的出现而演变。该基准的分析显示，大型语言模型在回忆过时的医疗信息方面存在困难，并表现出时间上不一致的行为，这表明它们在处理特定时间点的医疗知识方面存在重大缺陷。 AI

影响 突显了大型语言模型在医学等对时间敏感领域的一个关键局限性，需要对时间知识编码进行未来研究。

排序理由 该集群包含一篇介绍用于评估大型语言模型能力的新颖基准的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新基准揭示大型语言模型在医学知识方面缺乏时间感知能力

报道来源 [1]

  1. arXiv cs.CL TIER_1 English(EN) · Anil Vullikanti ·

    大型语言模型缺乏对医学知识的时间感知能力

    The existing methods for evaluating the medical knowledge of Large Language Models (LLMs) are largely based on atemporal examination-style benchmarks, while in reality, medical knowledge is inherently dynamic and continuously evolves as new evidence emerges and treatments are app…

相关实体

相关话题