研究人员开发了一种新的生成模型对齐方法 ZeNOVA,该方法无需梯度信息即可运行。这种方法在无法直接访问梯度的“黑盒”奖励场景中特别有用。ZeNOVA 利用退火软值引导、流形约束超球面 Langevin 动力学和 Metropolis-Hastings 跳跃,实现初始噪声的稳定高效优化。在图像和视频生成模型上的实验表明,ZeNOVA 在稳定性和奖励优化方面优于现有的无梯度方法。 AI
影响 为生成模型对齐提供了一种更稳定、更高效的无梯度方法,尤其是在黑盒奖励场景中。
排序理由 该条目描述了在研究论文中提出的一种新的生成模型对齐方法。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →