Contrastive Mixed Prompt Learning

新方法应对具有未见数据组合的不完整多模态情感分析 · 跟踪 2 个来源

两篇新的研究论文解决了不完整多模态情感分析的挑战，即在测试期间缺少某些数据模态。第一篇论文介绍了对比混合提示学习 (CMPL)，它使用标签引导的对比机制和模态组合提示来提高对未见模态组合的泛化能力。第二篇论文提出了一种迭代代理校正框架，该框架利用非语言模态逐步精炼语言代理，并根据估计的可靠性自适应地将其与观察到的语言表示融合。两种方法在基准数据集上都显示出比现有方法有显著改进。