Agentic Video Encoder

新的AVA-Encoder框架使AI智能体能够通过知识图谱从电影中学习

研究人员推出AVA-Encoder，一个旨在使创意智能体能够从高质量人类电影中学习的新颖框架。该系统将视频转换为结构化知识图谱（KGs），智能体可以轻松理解、查询和编辑。AVA-Encoder随后从该KG重建视频，利用差异来优化表示并提高智能体推理能力。实验表明，与现有方法相比，该方法有了显著改进，并且系统提示令牌数量显著减少。