ScalablePromptus

ScalablePromptus 增强了基于提示的视频流的网络鲁棒性

研究人员开发了 ScalablePromptus，这是基于提示的视频流 Promptus 框架的一项进展。这种新方法解决了现有系统对网络波动的脆弱性，当提示不完整时，网络波动会导致严重的质量下降。ScalablePromptus 结合了语义和颜色感知的提示反演、球面线性插值以及一种新颖的 dropout 训练策略，以创建秩排序的提示表示。这使得即使从截断的提示也能进行鲁棒的视频重建，在有损网络条件下显著降低了性能损失。