IT-TextFusion

IT-TextFusion框架通过迭代精炼增强文本引导的图像融合

研究人员推出了一种新颖的文本引导图像融合框架IT-TextFusion，它增强了多模态信息的集成。该方法在多个阶段利用迭代式文本-图像交互和文本条件特征融合，以提高对复杂退化的鲁棒性。通过引入交叉注意力、交叉门融合和文本条件调制，IT-TextFusion旨在提供退化感知的语义条件，同时保留不同模态的互补信息。实验表明，该框架提高了信息保留和感知质量指标，尽管在某些指标上存在权衡。