textual semantics

新的MAF框架增强了MLLMs的情感分析能力

研究人员引入了一个名为多模态自适应少样本提示（MAF）的新颖框架，以增强多模态大语言模型（MLLMs）的情感分析能力。MAF通过动态检索和整合相关的演示来解决静态提示对于细微的多模态数据而言并非最优的问题。该框架包含用于编码面部表情、场景上下文和文本语义的模块，以及用于说话人识别的唇部运动检测机制。实验表明，MAF在基线MLLMs上的性能得到了显著提升，并且与其他多模态情感分析方法相比仍具竞争力。