RWTH-PHOENIX-Weather 2014T

新的扩散模型框架增强了基于姿态的人物图像生成

研究人员开发了一个名为“用于基于姿态生成人物图像的融合嵌入”（FPDM）的新框架，使用扩散模型来改进基于指定姿态的人物图像生成。该方法通过对比学习明确地将融合的源姿态嵌入与目标图像嵌入对齐，并使用学习到的融合嵌入作为生成的条件信号。FPDM集成了图像-姿态融合模块来学习这些对齐的嵌入，并使用源外观、目标姿态和融合嵌入来指导条件扩散模型。在基准数据集上的实验表明，FPDM在纹理保真度和跨姿态和源变化的一致性方面有所提高。