实体
Residual VQ-VAE
Residual VQ-VAE
PulseAugur coverage of Residual VQ-VAE — every cluster mentioning Residual VQ-VAE across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
新AI模型在手语识别和生成方面取得进展
研究人员开发了超越传统闭集分类的新型手语识别和生成方法。一种方法利用视频字幕和描述检索来创建一个能够处理开放词汇和连续手语的反向手语词典，在识别已见和未见手语方面均有显著改进。另一种方法SignSeek通过对比学习手语并使用发音部位显著性引导掩码来学习手语词典检索的可迁移表示，在多种手语上取得了最先进的性能，甚至无需微调即可泛化到未见过的手语。SignMatch也通过学习原型结构嵌入空间来匹配词典手语与连续视频，展示了有效的跨语言泛化…
-
新型Ensembits分词器捕捉蛋白质动力学用于语言建模
研究人员开发了Ensembits，这是一种新颖的分词器，旨在表示蛋白质构象集合，它捕捉了超越静态结构的动态运动和替代状态。这种新方法通过使用具有帧蒸馏目标的残差VQ-VAE来解决编码可变大小集合和稀疏动力学数据的挑战。Ensembits在预测蛋白质动力学方面表现出优越的性能，并且在各种预测任务上匹配或超过静态分词器，尽管使用了更少预训练数据，为将动力学纳入蛋白质语言建模和设计铺平了道路。