NegT2IBench

新的基准 NegT2IBench 测试 AI 图像生成器在负面约束下的表现

研究人员推出了 NegT2IBench，这是一个旨在评估文本到图像模型遵守负面约束能力的新基准。与专注于生成请求内容的传统基准不同，NegT2IBench 评估这些模型在避免生成禁止元素方面的表现，例如创建“非红色杯子”的图像。该基准包含 4,800 个包含不同程度肯定和否定陈述的提示，可以对模型故障进行更细粒度的分析。对十一个文本到图像模型的初步测试显示，许多模型在否定约束上的表现比肯定约束差，并且有相当大比例的模型生成了提示明确禁止的内容。