ProGVC

ProGVC框架通过自回归上下文建模推进生成视频压缩

研究人员推出了一种新颖的生成视频压缩框架ProGVC，该框架利用自回归上下文建模。该方法通过将视频编码为分层的多尺度残差令牌图，实现了渐进式传输和高效的熵编码。该系统通过传输粗到精的尺度子集来实现灵活的比特率适应，并且基于Transformer的上下文模型用于估计熵编码的令牌概率，以及在解码器处预测细尺度令牌以恢复感知细节。实验表明，ProGVC在低比特率下提供了有希望的感知压缩性能，同时保持了可扩展性。