Trust-Region Noise Search

新算法通过黑盒噪声优化对齐扩散模型和流模型

研究人员开发了一种新的基于信任域的搜索算法（TRS），用于在推理时将扩散模型和流模型与特定奖励对齐。该方法将生成模型和奖励模型视为黑盒，仅专注于优化源噪声。TRS在探索和利用之间取得了平衡，所需的超参数调整极少，并且在文本到图像生成、分子设计和蛋白质设计等各种生成任务中表现出通用性。评估表明，与基础模型和其他噪声优化技术相比，TRS显著改善了输出样本。