P1n3/sdg-detector-grpo

新方法为文本到图像模型故障提供结构化诊断

研究人员推出了一种名为结构化缺陷定位（SDG）的新方法，用于诊断文本到图像模型的故障。SDG将缺陷表示为结构化集合，包括位置、类型、原因和重要性，超越了简单的基于热图的方法。为此框架创建了一个新数据集SDG-30K和一个评估协议SDG-Eval。SDG方法在识别结构化缺陷方面表现优于现有的视觉语言模型，并已被集成到一个利用这些诊断来改进文本到图像模型对齐的框架中。