LiveLight

LiveLight框架支持实时交互式视频重照明

研究人员开发了LiveLight，一个新颖的、基于扩散的模型框架，用于实时视频重照明和交互式3D照明控制。该系统解决了将动态照明集成到扩散模型中的挑战，在低推理预算下保持质量，并实现连续流式传输。关键创新包括用于多平面光照强度（MPLI）注入的轻量级适配器、用于确保合理阴影的几何引导反馈分支，以及用于长视频时间连贯性的渐进式滚动窗口策略。LiveLight展示了最先进的重照明质量和实时性能，在稳定性和可控性方面优于离线方法。