North India

新框架评估大语言模型在印度孕产妇健康领域的文化契合度

研究人员开发了 MH-INDIC，这是一个旨在评估大语言模型（LLMs）在孕产妇健康领域文化契合度的新框架，特别关注印度北部。该框架超越了事实准确性评估，衡量大语言模型交互在多大程度上反映了文化情境的推理、社会规范和护理的关联方面。对十个大语言模型的评估显示，虽然一些模型近似了人口层面的文化契合度，但与人类群体相比，它们在不同人口统计学特征下的行为差异通常较小，这表明在满足个体需求方面存在差距。