Yue Zhang

新框架增强LLM的3D场景编辑能力 · 追踪3个来源

研究人员正在开发新方法来提高大型语言模型（LLM）理解和操作3D环境的能力。一种名为DEER-3D的方法，通过生成有针对性的反事实训练示例，使用错误驱动框架来识别和纠正3D LLM中的接地失败。另一种方法Chat-Edit-3D++，通过一个可以调用各种视觉模型的LLM实现交互式3D和4D场景编辑。第三种技术DisCo3D，通过将3D一致性先验知识提炼到2D编辑器中，在3D场景编辑过程中保持多视图一致性，最终将编辑优化为3D表示。