Marigold V1

Marigold V2 使用扩散 Transformer 推进单目深度估计

研究人员开发了 Marigold V2，这是单目深度估计领域的一项进展，它重新利用了扩散 Transformer (DiT) 架构。该新方法通过采用预训练流匹配模型的单步推理、与真实特征的语义对齐以及使用基于 Sinkhorn 的损失的新颖两阶段微调协议，实现了更清晰、更详细的深度图。Marigold V2 在 KITTI 和 ETH3D 等基准测试中显示出比先前模型显著的改进，并且在表面法线估计和内在图像分解等相关任务上也表现出最先进的性能。