PREX

新的PREX框架实现了忠实的4D视频编辑

研究人员开发了PREX，一个新颖的、用于忠实4D视频编辑的框架，它解决了在合成新内容的同时保留原始区域的挑战。该方法识别并纠正了现有扩散模型中的“证据-角色不匹配”问题，该问题可能导致重影和不稳定的外推。PREX将视频体积分解为不同的角色（Preserve, Reveal, Expand），并使用一个区域感知适配器，该适配器带有校准的置信度提示，并且无需配对的编辑视频即可进行训练。还引入了一个新的基准PREBench来评估这些能力。