MindSim

新框架MindEval2评估AI在心理健康支持中的应用

研究人员推出了MindEval2，这是一个旨在严格评估语言模型在心理健康支持领域应用的新框架。该框架包括心理健康质量评分标准（MHQR），由博士级心理学家开发，用于可解释和可操作的响应质量评估，以及MindSim，一个能够模拟更真实、更具挑战性的患者互动并具备记忆能力的LLM工具。通过测试18个模型，MindEval2显示，尽管前沿模型在基本质量和边界遵循方面有所改进，但所有评估模型的指导校准仍然是一个重大挑战。