Amigos

BioKD框架利用生理信号增强基于视频的情感识别

研究人员开发了BioKD，一个新颖的情感识别框架，它利用生理信号来训练基于视频的模型。该方法解决了仅依赖视频线索（可能含糊不清）的局限性以及在推理时直接使用生理信号的不切实际性。BioKD采用可靠性感知门控机制来管理生理数据的噪声和不稳定性，通过自适应地控制知识转移来确保稳定的跨模态蒸馏。在DEAP和AMIGOS数据集上的实验表明，BioKD在效价和唤醒度识别方面表现优越，尤其是在受试者无关的评估中。