Xiaohua Huang

新的TAME框架通过文本锚定专家增强多模态情感分析

研究人员开发了一个名为TAME的新框架，用于多模态情感分析，该框架集成了文本、音频和视频等各种数据类型。TAME将文本信息作为主要的语义来源，并根据非语言信号的可靠性选择性地纳入。该方法使用非对称模态专家混合模型和新颖的不确定性引导路由机制来有效地融合信息。在基准数据集上的实验表明，TAME取得了最先进的结果，同时与现有方法相比显著减少了计算资源和参数数量。