研究人员开发了一个名为多模态互动欺骗评估 (MIDA) 的新基准,用于评估多模态大型语言模型 (MLLMs) 在社交互动中检测欺骗行为的能力。该基准包含带有真实标签的同步视频和文本数据。包括 GPT-4o 在内的当前最先进的 MLLMs 在区分真相与欺骗方面表现出显著的性能差距,表明它们难以整合多模态社交线索和模拟他人的意图。该研究提出了一个社交思维链 (SoCoT) 推理管道和一个动态社交认知记忆 (DSEM) 模块来提高性能,其中 DSEM 显示出持续的益处。 AI
影响 强调了当前 MLLMs 在理解细微社交线索方面的能力存在显著差距,为更像人类的 AI 互动指明了未来的研究方向。
排序理由 该集群描述了一篇介绍评估 LLM 能力的基准和方法的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- Caixin Kang
- Dynamic Social Epistemic Memory
- GPT-4o
- Hugging Face
- MIDA
- MLLMs
- Multimodal Interactive Deception Assessment
- Sema2a
- Socotrella
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →