研究人员开发了ConsMSA,一种新颖的多模态情感分析方法,解决了文本、视频和音频等不同数据类型之间的语义不一致性问题。通过将特征投影到共享的情感空间,ConsMSA计算模内和模间一致性得分(I²CS)。该得分用于正则化潜在分布、自适应地重新加权多模态令牌,并修剪冗余数据,从而提高准确性和效率。在基准数据集上的实验表明,即使在显著减少处理的令牌数量的情况下,ConsMSA也能取得最先进的结果。 AI
影响 该方法通过降低计算成本和提高鲁棒性,有望实现更高效、更准确的情感分析系统。
排序理由 该条目是一篇研究论文,详细介绍了一种新的多模态情感分析方法。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- CH-SIMS
- CMU-MOSEI
- CMU-MOSI
- ConsMSA
- DagsHub
- Gotit.pub
- Hugging Face
- IArxiv
- ScienceCast
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →