medical LLMs

新的基准套件AMNESIA针对医疗机器学习遗忘

研究人员推出了AMNESIA，一个新颖的基准套件，用于评估医疗领域的机器学习遗忘。这个大规模的开源资源包含来自11个疾病类别的患者记录的超过70,000个问答对。AMNESIA旨在解决现有遗忘基准的局限性，这些基准通常使用合成或通用数据，通过关注临床相关性和推理。使用AMNESIA进行的初步评估显示，遗忘单个患者的数据可能会无意中影响具有相似病症的其他患者的知识保留，突显了对更复杂遗忘方法的需求。