ZeroGVC

零样本生成视频压缩框架发布

研究人员开发了ZeroGVC，一个新颖的零样本生成视频压缩框架。该方法利用预训练的自回归扩散模型，在极低比特率下实现高质量视频重建，无需额外训练。ZeroGVC使用标准图像编解码器对图像组（GOP）的第一帧进行编码，然后利用码本噪声向量引导扩散过程来表示后续帧，使解码器能够以最少的去噪步骤重现同一帧。可选的双向参考模式通过使用未来上下文而不增加比特率来进一步提高质量。