Video anomaly understanding

新的TAU-Bench基准评估视频异常理解模型

研究人员推出了TAU-Bench，一个旨在评估视频异常理解（VAU）模型的新基准。该基准侧重于联合评估模型跟踪异常实例和理解事件细粒度的能力。TAU-Bench包含1100多个带有详细注释的视频，旨在弥合VAU系统中语义解释与视觉基础之间的差距。使用视觉语言模型（VLMs）进行的初步评估表明，虽然模型可以生成合理的描述，但它们在可靠地定位和跟踪正确的异常实例方面常常遇到困难。