dual-stream visual model

AI框架改进帕金森病步态冻结预测

研究人员开发了一种新颖的跨模态蒸馏框架，以改进帕金森病患者步态冻结（FOG）的预测。该方法结合了惯性测量单元（IMU）数据的准确性与视频分析的实用性，解决了单一模态方法的局限性。该系统使用运动学预言机提取不变的潜在拓扑结构，并使用双流视觉模型融合骨骼图节点与空间像素，在遮挡期间根据跟踪置信度动态调整依赖性。在多模态数据集上的实证结果表明，即使没有可穿戴传感器，也能实现精确的FOG预测。