Spoken QA

Lychee-FD框架通过分离声学和语义模态增强全双工SLM · 跟踪2个来源

研究人员推出Lychee-FD，一个旨在通过解决模态干扰来改进全双工口语模型（SLMs）的新型框架。该框架采用分层参数分离策略来解耦声学和语义建模，同时通过语义对齐通道维持跨模态一致性。实验表明，Lychee-FD在Spoken QA和FullDuplexBench 1.5等基准测试中显著提高了语音智能和交互流畅性，且不牺牲推理效率。