研究人员开发了ACWM-RM,这是一种新颖的奖励模型,旨在通过联合评估视觉质量(VQ)和动作遵循保真度(AF)来改进动作条件世界模型(ACWMs),而无需地面真实视频。该模型解决了现有奖励模型通常只关注一个维度或在生成内容方面存在困难的局限性。为了训练ACWM-RM,创建了一个名为AVM-Pref的新数据集,其中包含超过50万个互补监督的偏好对。在AVM-Eval基准上的评估表明,ACWM-RM在强化学习实验中的性能优于基线奖励。 AI
影响 这种新的奖励模型可以增强动作条件世界模型的训练,从而生成更真实、更准确的视频。
排序理由 该集群包含一篇详细介绍新模型和数据集的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- Action and Video Mismatch Benchmark
- Action and Video Mismatch Preference Dataset
- ACWM-RM
- arXiv
- AVM-Eval
- AVM-Pref
- Hugging Face
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →