Nurse Training dataset

新的基于LoRA的框架增强了医学训练中的动作识别能力

研究人员开发了一种新的级联低秩适配（LoRA）多模态融合框架，用于医学训练环境中的动作识别。该方法按顺序整合各种数据模态，优先处理密切相关的模态，然后再纳入其他模态，从而无需重新训练现有组件即可实现参数高效适配。该框架在NurViD和Nurse Training数据集上进行了评估，显示出优于单一模态模型的性能，并且与现有基线相比具有竞争力。