Clip Score
PulseAugur coverage of Clip Score — every cluster mentioning Clip Score across labs, papers, and developer communities, ranked by signal.
-
AI使用多模态Stable Diffusion XL生成符合文化习俗的Ulos图案
研究人员开发了一个多模态生成框架，通过实现可控且符合文化习俗的图案生成，来帮助传统的巴塔克Ulos编织业。该系统使用LoRA对Stable Diffusion XL进行微调，并与LLaMA 1.5-7B集成，采用四种条件机制：通过ControlNet的文本、图像、表示和语义图。消融研究表明，文本、图像和语义图条件的组合在FID和CLIP Score方面产生了最佳结果，而文本、图像和表示则提供了一种平衡的方法。用户评估证实了统计学上显著…
-
新研究解决了扩散模型的安全性和数据生成问题
研究人员正在开发先进的技术来提高扩散模型的安全性和实用性。一种方法，".ours"，专注于生成合成表格数据，该数据不仅匹配真实数据分布，而且还遵循语义约束，使用LLM辅助提取先验。另一个研究领域涉及文本到图像扩散模型中的概念擦除，诸如动态语义引导（DSS）和GRACE等方法旨在抑制敏感内容（例如，不适宜内容、受版权保护的材料），同时保持整体生成质量和语义一致性。一项相关研究引入了一个认证框架来严格评估概念遗忘，对残余泄露提供超越传统经…
-
Gaussian Core LoRA 增强了文本到图像扩散模型中的概念擦除
研究人员推出了一种名为 Gaussian Core LoRA 的新颖框架，旨在改进文本到图像扩散模型中的概念擦除。该方法通过根据目标概念内的特定语义原型调整擦除方向来解决现有技术的局限性。通过将高斯混合模型拟合到提示特征，Gaussian Core LoRA 动态调整生成以抑制不需要的内容，同时保持视觉质量和良性语义。实验表明，与基线方法相比，攻击成功率显著降低，图像质量指标得到改善，并证明了其对各种扩散模型的鲁棒性和兼容性。
-
UniWorld-Design框架实现图层原生图像生成
研究人员推出了一种新颖的框架UniWorld-Design，它将图像生成从扁平像素转移到结构化RGBA图层。这种方法使模型能够像人类设计师一样，通过图层来理解和编辑图像。该框架包含两个模型：T2RGBA用于从文本生成RGBA素材，I2L用于根据指令将现有图像分解为语义RGBA图层。在评估中，I2L在Crello基准测试中显著减少了错误并提高了IoU，而T2RGBA在CLIP Score方面取得了最佳性能。
-
新技术通过多视图蒸馏提升2D扩散模型生成的3D模型质量
研究人员开发了一种名为多视图聚合分数蒸馏（MV-SDI）的新技术，以提高从2D扩散模型生成的3D模型的质量。该方法通过在生成过程中聚合来自多个视图的信息来减少梯度的方差，而不是依赖于单个随机视图。MV-SDI保留了原始的2D扩散模型，无需重新训练或多视图数据，从而显著提高了模型的一致性并减少了所需的优化步骤。
-
Oracle Noise 框架通过更快的语义对齐来增强文本到图像模型
研究人员推出了一种名为 Oracle Noise 的新颖框架，旨在通过优化初始噪声输入来改进文本到图像扩散模型。该方法将噪声初始化重构为受语义驱动的、约束在超球体内的优化过程，从而防止范数膨胀并保留高斯先验。Oracle Noise 可有效识别提示中的关键结构词，以引导优化能量，从而在不依赖外部代理模型的情况下实现更快的收敛和更高的图像质量。实验表明，在 2 秒的优化窗口内，人类偏好、语义对齐和样本多样性均得到显著改善。