Dream Scene Visualiser

新系统利用大型语言模型和图像生成技术，根据文本描述可视化梦境

研究人员开发了一个名为梦境场景可视化器（DSV）的系统，该系统可将书面梦境描述转换为一系列四张图像。该系统首先使用大型语言模型将梦境叙事划分为四个按时间顺序排列的片段。随后，文本到图像模型为每个片段生成视觉效果，确保序列的视觉一致性，并重新生成与文本不符的图像。DSV 的有效性通过 DreamBank 的 50 个梦境可视化样本进行了评估，并利用 CLIP、DINOv2 和 Qwen2-VL 模型通过客观指标进行了评估。