Electrocylography

新的RAMamba-Net融合EEG和EOG以改进听觉注意力解码

研究人员开发了RAMamba-Net，一种用于听觉注意力解码（AAD）的新型多模态融合网络。该网络整合了脑电图（EEG）和眼电图（EOG）信号，以改进对注意力说话者的识别，这是高级助听设备和人机交互的关键功能。RAMamba-Net利用Mamba增强的Transformer处理时间动态和特定频段的EEG模式，而双分支编码器则处理EOG数据。一项关键创新是其可靠性感知模块，该模块动态加权模态贡献，以增强融合和对抗信号变化的鲁棒性。