MER2025

新的代理框架改进了对话中的多模态情感推理

研究人员开发了一种用于多模态对话情感推理的代理框架，该框架提高了可追溯性并降低了与指令调优相关的计算成本。该方法利用特定模态的代理来分析视觉、听觉和词汇输入，将证据引用的观察结果发布到共享板上。然后，一个集成代理将这些观察结果与检索到的示例结合起来，生成一个带有引用的情感描述，并有一个批评代理允许进行一次修订。对于不正确的预测，验证阶段会检查引用证据的有效性以及对最终声明的支持程度，从而无需更新模型权重即可进行有针对性的提示调整。