TAKE 85

新的基准TAKE 85测试MLLMs对电影导演意图的理解

研究人员推出了TAKE 85，这是一个旨在评估多模态大语言模型（MLLMs）在多大程度上能理解电影中导演意图的新基准。该基准包含398部短片，总时长85小时，并附有专家验证的问答对，涵盖了视觉和听觉意图的广泛和具体方面。目前最先进的MLLMs在该领域显示出显著的差距，它们能准确描述事件，但无法推断电影制作决策背后的沟通目的。即使是表现最好的模型也只得到了100分中的58分，这表明没有单一的输入模态足以理解导演意图。