实体
Seongjae Kang
Seongjae Kang
PulseAugur coverage of Seongjae Kang — every cluster mentioning Seongjae Kang across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新的PCoreSet策略通过VLM知识蒸馏增强活动学习
研究人员推出了一种新颖的活动学习策略PCoreSet，该策略利用视觉语言模型（VLM）的知识蒸馏。这种称为ActiveKD的方法通过利用VLM的零样本和少样本能力，解决了活动学习中标记数据有限的挑战。PCoreSet侧重于根据概率预测选择多样化的未标记样本，而不是特征空间覆盖，以更有效地将知识从教师VLM转移到学生模型。评估表明，ActiveKD在各种数据集上显著提高了性能，PCoreSet持续优于随机选择和其他方法。
-
新的双头优化通过半监督学习提升VLM知识迁移能力
研究人员开发了双头优化（DHO）技术，通过有效地将知识从强大的视觉语言模型（VLM）迁移到更小的、特定任务的模型，来改进半监督学习。DHO解决了在结合监督和蒸馏损失时出现的梯度冲突问题，从而实现更好的特征学习和性能。在多个数据集上的实验表明，DHO优于标准的知识蒸馏方法，在ImageNet半监督学习和分布外泛化方面取得了最先进的成果。