研究人员推出了 NegT2IBench,这是一个旨在评估文本到图像模型遵守负面约束能力的新基准。与专注于生成请求内容的传统基准不同,NegT2IBench 评估这些模型在避免生成禁止元素方面的表现,例如创建“非红色杯子”的图像。该基准包含 4,800 个包含不同程度肯定和否定陈述的提示,可以对模型故障进行更细粒度的分析。对十一个文本到图像模型的初步测试显示,许多模型在否定约束上的表现比肯定约束差,并且有相当大比例的模型生成了提示明确禁止的内容。 AI
影响 该基准可以通过突出 AI 图像生成在处理否定方面的特定弱点来推动改进,从而实现更可控、更可靠的模型。
排序理由 该集群包含一篇介绍 AI 模型新基准的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →