研究人员开发了 SFGATE,这是一种以统计为先的门控架构,旨在改进监督微调 (SFT) 数据的采购。该系统将数据获取视为一个成本感知路由问题,跨多样性、效用和冗余评估语料库。SFGATE 以低单位成本实现了 0.90 的准确率和 0.83 的 F1 分数,优于始终验证数据的基线。该系统还包括一个用于模糊案例的裁决辩论机制,揭示了朴素 LLM 裁判的偏见。 AI
影响 该架构可以简化为训练 AI 模型获取高质量数据的过程,有可能降低成本并提高模型性能。
排序理由 该项目是一篇研究论文,详细介绍了一种新的数据采购架构。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →