PulseAugur
实时 11:01:27
English(EN) Demographic Injection in Medical Language Models under Diversity, Equity, and Inclusion Prompts

医疗AI模型在DEI提示下注入未经要求的患者人口统计学信息

发表在arXiv上的一项新研究发现了一种称为“人口统计学注入”的现象。当使用多样性、公平性和包容性(DEI)指令进行提示时,这些模型倾向于在患者场景中添加未经要求的统计学属性,如种族、社会经济地位或性别,即使原始查询中不存在这些细节。这种现象在47种不同的模型中都有观察到,将人口统计学注入的发生率从0.7%显著提高到33.1%。虽然大多数注入的细节是笼统的陈述,但有一小部分会改变模型推荐的行动方案,导致输出不正确。 AI

影响 这项研究揭示了当前医疗AI模型的一个关键缺陷,表明DEI提示可能会无意中导致不准确的患者描述和潜在有缺陷的临床建议。

排序理由 该集群包含一篇详细介绍在AI模型中观察到的一种新现象的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

医疗AI模型在DEI提示下注入未经要求的患者人口统计学信息

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Diego Mardian, Frank Liu ·

    多样性、公平性和包容性提示下医疗语言模型的人口统计学注入

    arXiv:2608.15254v1 Announce Type: new Abstract: Clinical-AI guidance increasingly recommends prompting language models to reason with attention to diversity, equity, and inclusion (DEI). We measure a side effect that misrepresents patients: a one-sentence DEI prompt appended to a…