InstancePin

InstancePin 扩散模型增强了实例级图像生成控制

研究人员开发了 InstancePin，一个新颖的扩散模型框架，旨在提高从布局输入生成图像时的实例级控制能力。与之前的类别对齐模型不同，InstancePin 将每个对象实例显式地锚定在坐标标记上，从而能够对单个对象进行更精细的控制，尤其是在城市环境等密集场景中。该框架使用实例感知适配器和坐标固定注意力来保持全局语义一致性，同时优化局部实例细节，实验表明其保真度有所提高，实例纠缠有所减少。