Hallo4D

新的Hallo4D框架解决了3D/4D生成中的幻觉问题

研究人员推出Hallo4D，一个旨在解决3D和4D内容生成中空间和时间幻觉的新颖框架。这种模型无关的方法采用生成-检测-纠正范式，利用大型多模态语言模型（LMM）来识别多视图和多帧渲染中的不一致之处。然后，这些已识别的问题会指导一个优化过程，以提高几何和时间一致性，而无需重新训练模型。Hallo4D还包含运动感知关键帧采样和LMM引导初始化等功能，以增强时间连贯性和效率。