实体
Harness-Aware Distillation
Harness-Aware Distillation
PulseAugur coverage of Harness-Aware Distillation — every cluster mentioning Harness-Aware Distillation across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新的OVM-Occ框架推进了开放词汇室内场景几何预测
研究人员推出了一种新颖的基于高斯的开放词汇单目占用预测框架OVM-Occ,用于室内场景。该方法利用实例感知的视觉语言教师和几何感知的可变形注意力模块来精炼语义特征并提供语义监督。该方法还结合了几何感知的解耦语义蒸馏,以改善几何和语义学习的分离。开发了新的基准OpenOcc-ScanNet和OpenOcc-Replica来评估开放词汇性能,OVM-Occ在该基准上展示了最先进的结果。
-
新的蒸馏方法改进了小型语言模型代理
研究人员开发了一种名为 Harness-Aware Distillation (HAD) 的新方法来训练小型语言模型代理。HAD 专注于教授学生代理教师代理的独特能力,而这些能力是部署工具链未提供的。它通过对比有无工具链信息时教师的行为来实现这一点,并包含一个有效性检查,以确保首选行为与工具链记录一致。与标准的 on-policy 蒸馏相比,这种方法在长时序代理基准测试中表现出更优的性能,因为它有助于代理避免无效循环并更有效地从错误中恢复。