研究人员开发了一个新框架,用于将多模态大语言模型(MLLMs)与人类认知过程对齐。该方法使用基于数百万人类判断的行为衍生的语义嵌入空间,指导MLLMs做出与人类相似性判断一致的选择并生成理由。该方法已显示出提高模型与人类行为的一致性,并增加与人类大脑活动的表征对齐,为将人类认知结构融入MLLMs提供了一条数据驱动的路径。 AI
影响 提供了一种数据驱动的方法来改进MLLMs与人类认知过程的对齐,可能带来更直观、更像人类的AI交互。
排序理由 学术论文,详细介绍了将MLLMs与人类认知结构对齐的新方法。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- cognition
- fMRI Natural Scenes Dataset
- Hugging Face
- MLLMs
- Odd One Out
- Representational similarity analysis
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →