Cross-Expert Wavefront Pipelining

RealtimeWAM 在世界动作模型上实现 25 倍加速

研究人员推出了 RealtimeWAM，这是一种新颖的世界动作模型 (WAMs) 方法，旨在显著提高推理效率。该方法采用一步动作生成和异步推理来克服先前的瓶颈。关键创新包括用于准确一步动作预测的教师锚定一致性蒸馏 (TACD) 和用于并行处理视频及动作专家的跨专家波前流水线 (CEWP)。实验表明，RealtimeWAM 在 NVIDIA H100 硬件上实现了高达 25 倍的显著加速，同时在各种基准测试中的性能下降极小。