Evidence Collector

新的EmAvatar框架增强了多模态共情响应生成

研究人员推出EmAvatar，这是一个旨在改进基于虚拟形象系统的多模态共情响应生成的新框架。该系统通过解决不同模态之间的冲突情感线索、为多模态合成提供明确指导以及减轻错误传播，来解决当前方法的局限性。EmAvatar采用一个涉及冲突检查器和证据收集器的冲突解决过程，以实现稳健、基于证据的情感感知，然后生成一个用于同步文本、音频和视频输出的复合脚本。