Gaussian Video Transformer

高斯视频Transformer通过2DGS分词推进视频表示

研究人员开发了高斯视频Transformer（GVT），一个利用前馈式二维高斯泼溅（2DGS）分词方案的创新视频表示框架。该方法通过根据信息内容动态分配渲染权重来增强空间适应性，并通过避免每视频优化来提高泛化能力。GVT还采用高斯集合划分策略来分离静态和动态内容，从而实现更紧凑的表示。在视频重建、动作识别、压缩和生成任务上的评估表明，在重建和压缩方面取得了最先进的性能，在其他领域也取得了有竞争力的结果。