VGA-Bench

新基准测试探究视频生成模型的推理和美学能力

研究人员推出了VGI-BENCH，这是一个新的基准测试，旨在评估视频生成模型在27个不同任务中的视觉推理能力。使用VGI-BENCH进行的初步评估显示，即使是Seedance~2.0等先进模型在可靠性方面也存在困难，准确率仅为51.0%，并且在生成过程中表现出自我纠正能力有限。同时，VGA-BenchV2扩展了现有框架，以联合评估视频美学和生成质量，包含更大的数据集和包括Qwen模型在内的混合评估系统。