研究人员开发了一个新的框架,用于在视频中精确地定位笑声事件,超越了简单的片段级分类。他们引入了两个新的时序笑声数据集 UR-FUNNY-Temporal 和 SMILE-Temporal,其中包含对超过 11,000 个视频的详细标注。他们提出的弱监督模型 MTLLFM 利用自适应模态门控和时序 Softmax 池化,在笑声定位方面取得了高精度,性能优于 Gemini 3 Flash 等模型。这种精确的时序标记也显著改进了下游任务,例如提升 GPT-3.5 在笑声推理方面的表现。 AI
影响 增强了 AI 在视频中理解细微人类情感的能力,改进了内容分析和人机交互等下游应用。
排序理由 这是一篇介绍新模型和特定 AI 任务数据集的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →