研究人员推出EmoteGPT,一个用于从自然语言描述生成3D人脸表情的新颖框架。该系统利用一个多模态大型语言模型,通过一个专门的token将文本输入转换为3D可变形模型(3D Morphable Model)的参数。该框架在一个名为Txt2Emote的新基准数据集上进行了训练,该数据集包含详细的表情文本注释,并进一步使用了图像到3DMM的数据进行增强。与现有的文本到3D人脸合成方法相比,EmoteGPT在表现力和情感识别方面表现出卓越的性能。 AI
影响 通过先进的文本到表情生成,能够实现更逼真、更可控的3D虚拟形象和虚拟交互。
排序理由 该集群包含一篇描述新模型和数据集的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- 3D Morphable Model
- arXiv
- DagsHub
- EmoteGPT
- GPT-4o
- Hugging Face
- multimodal large language model
- Txt2Emote
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →