Cross-modal Structure Alignment

EventGait 使用事件相机实现鲁棒步态识别

研究人员开发了 EventGait，一种使用事件相机进行步态识别的新型双流框架。该方法分别处理运动和形状信息，利用混合脉冲专家进行动态感知，并利用跨模态结构对齐进行形状表示。为了促进研究，他们还引入了两个新基准 SUSTech1K-E 和 CCGR-Mini-E，以及一个用于基于事件的步态数据的合成流程。与传统的基于相机的方​​法相比，EventGait 在弱光条件下表现出卓越的性能，并在基于事件的步态识别基准上设定了新的最先进水平。