embedding adapters

新的诊断工具揭示扩散模型中的控制-修复分离

研究人员开发了一种新的方法来诊断和控制文本到图像扩散模型中的失败，特别是在组合任务中。他们引入了一个仅文本的组合压力指数（CSI）来识别 SD1.5、SDXL 和 Stable Diffusion 3 等模型中常见与罕见的组合。他们的研究发现，虽然组合缺陷可以在去噪过程之前诊断出来，但揭示这些风险的具体坐标并不总是能改善生成的坐标，这表明诊断和控制之间存在分离。