HiPLEX

新研究探索全双工对话模型、记忆和轮流发言

研究人员正在开发改进全双工口语对话模型的新方法，这些模型允许同时进行听和说。一种方法 PERSIST 引入了一个记忆系统，该系统跟踪谁在何时说了什么，从而显著降低了检索延迟。另一个关注点是这些模型在相互交互时的轮流发言行为，研究表明它们的时序是耦合的，但与人类对话相比通常会延迟。正在提出 DyaFDB 和 HiPLEX 等新框架来评估和改进这些模型，考虑它们的二元交互和分层策略分解，以获得更好的时序和内容协调。