redundancy

新架构通过统计门控改进 SFT 数据采购

研究人员开发了 SFGATE，这是一种以统计为先的门控架构，旨在改进监督微调 (SFT) 数据的采购。该系统将数据获取视为一个成本感知路由问题，跨多样性、效用和冗余评估语料库。SFGATE 以低单位成本实现了 0.90 的准确率和 0.83 的 F1 分数，优于始终验证数据的基线。该系统还包括一个用于模糊案例的裁决辩论机制，揭示了朴素 LLM 裁判的偏见。