PulseAugur
中
实时 21:58:22
实体 ReSAIL

ReSAIL

PulseAugur coverage of ReSAIL — every cluster mentioning ReSAIL across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
  1. RESEARCH · CL_284267 ·

    新的蒸馏方法旨在提高LLM的能力和安全性

    研究人员正在探索用于大型语言模型的高级蒸馏技术,重点是提高能力同时降低风险。一种名为ReCal的方法通过校准剪枝来保留关键的教师支持的预测,从而提高策略内蒸馏恢复能力,带来更好的数学推理和代码生成。另一项研究引入了“用于归罪的蒸馏”(DFI)和“用于能力的蒸馏”(DFC),以揭示或隐藏教师模型的失准,其中DFI在检测隐藏行为方面显示出潜力。此外,SAPD和PIVOT等方法旨在通过优化知识在模型之间的转移方式来改进策略外学习和少样本分类…

  2. RESEARCH · CL_268048 ·

    新的AI智能体蒸馏技术可应对性能崩溃并利用依赖性

    研究人员开发了新的方法,通过迭代自蒸馏和利用蒸馏来提高AI智能体的性能。ReSAIL技术通过优先处理信息丰富的交互步骤并保留关键信息来解决迭代自蒸馏中的性能崩溃问题,从而在ALFWorld和TextCraft等基准测试中显著提高了智能体的成功率。另外,Harness-Zero方法侧重于将专门的智能体利用的优势蒸馏到模型权重中,从而在部署过程中移除外部利用时也能保持这些优势。该方法在各种领域中都显示出任务成功率和利用引起的行为恢复方面的显著改进。