R-DMesh

新的R-DMesh框架解决了3D动画姿态不匹配问题

研究人员开发了R-DMesh，一个用于视频引导3D动画的新框架，解决了3D网格与参考视频之间常见的初始姿态不匹配问题。该系统使用变分自编码器来解耦基础网格、运动轨迹和校正偏移量，使其能够在动画之前自动调整输入网格的姿态。这种方法确保了几何一致性，并支持姿态重定向和完整的4D生成等应用，该方法得到了一个包含超过50万个动态网格序列的新数据集的支持。