研究人员开发了I$^2$-KAN,一种用于多模态情感分析的新型框架,它将模态内和模态间信息通路解耦。该方法使用任务解耦的线性门控去噪瓶颈来优化表示,并使用Kolmogorov-Arnold网络进行融合,从而实现多层次的可解释性。在CMU-MOSI、CMU-MOSEI和CH-SIMS v2数据集上的实验表明,一个模态的独立预测效用并不总是与其在考虑交互条件下的效用相关,这凸显了同时考虑这两种观点的 Yet. AI
影响 增强了多模态AI的可解释性,可能改进跨不同数据类型的情感分析方式。
排序理由 该集群包含一篇详细介绍多模态情感分析新方法的 ist.
- arXiv
- CH-SIMS v2
- CMU-MOSEI
- CMU-MOSI
- I$^2$-KAN
- Kolmogorov-Arnold Networks
- Task-Decoupled Linear-Gated Denoising Bottleneck
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →