实体
Unified Relational Distillation
Unified Relational Distillation
PulseAugur coverage of Unified Relational Distillation — every cluster mentioning Unified Relational Distillation across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
CloSeR框架增强AI模型中的类别发现能力
研究人员推出CloSeR,一个旨在改进广义类别发现(GCD)的新型框架。GCD旨在识别已知类别,同时也能从无标签数据中发现新的、连贯的类别。CloSeR采用两步流程:首先,它使用轻量级适配器训练一个闭集教师模型,以保留预训练知识;然后,它使用统一关系蒸馏(URD)将这些知识迁移到GCD任务中。该方法在与DINO和DINOv2骨干网络集成时,在各种基准测试中均展现了最先进的性能。
-
CloSeR框架通过蒸馏闭集教师模型的知识来增强类别发现能力
研究人员推出了一种名为CloSeR的新型框架,旨在通过利用闭集教师模型的知识来改进广义类别发现(GCD)。该方法解决了当前GCD方法中联合训练可能导致目标冲突和预测偏差的问题。CloSeR采用两阶段过程:首先,训练一个轻量级的、经过领域适应的闭集教师模型;然后,使用统一关系蒸馏(URD)将该教师模型的知识蒸馏到下游GCD任务中。这种方法在多个基准测试中展示了持续的性能提升,并取得了最先进的成果。