研究人员推出了一种新颖的文本到图像扩散模型对齐方法SaTPO(Safety Transition Preference Optimization),该方法可在不牺牲生成质量的情况下抑制有害内容。SaTPO通过在去噪过程中强制执行分步对齐,利用了安全和不安全提示重写可以被视为锚定在相同父状态上的偏好对的见解。这种方法将安全适应性限制在增量变化上,从而保留了任务相关的语义。在Stable Diffusion v1.5和SDXL上使用名为CoProPV的新数据集进行的实验表明,与AlignGuard和PerspectiveVision等现有方法相比,安全-质量权衡得到了改善。 AI
影响 这项研究通过提高生成式AI模型在不降低图像质量的情况下避免有害输出的能力,有可能使其更加安全。
排序理由 该集群描述了一篇学术论文中提出的一种新方法,用于提高文本到图像模型的AI安全性。[lever_c_demoted from research: ic=1 ai=1.0]
- AlignGuard
- CoProPV
- Inappropriate Image Prompts
- PerspectiveVision
- SDXL
- Stable Diffusion v1.5
- Text-to-Image Safety Alignment via Transition Preference Optimization
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →