研究人员推出TV-AudioRemover,一个新颖的框架,旨在从视频中移除与特定视觉对象相关的声音。与依赖单模态控制的先前方法不同,TV-AudioRemover利用视觉编辑的视频和自然语言指令进行更有效的多模态引导。该项目还包括创建一个用于训练的大规模数据集,一个名为AV-Remove-Bench的用于评估的综合基准,以及一个基于MLLM的评估协议。 AI
影响 这项研究通过实现与视觉编辑同步的精确音频操作,可能带来更复杂的视频编辑工具。
排序理由 这是一篇描述新方法和数据集的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- AV-Remove-Bench
- CatalyzeX
- DagsHub
- Gotit.pub
- Hugging Face
- Jianxuan Yang
- multimodal large language model
- ScienceCast
- TV-AudioRemover
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →