LongForge

新框架LongForge提升长上下文AI数据质量和性能

研究人员推出LongForge，一个旨在衡量和改进长上下文指令调优数据质量的新颖框架。LongForge通过根据文档、问题和答案之间的对齐结构来形式化数据质量，解决了当前数据质量控制的局限性。它包含一个分析器，将数据样本重构为证据-断言推理图，量化广度、深度、正确性和完整性，使数据可审计。然后，一个合成器组件利用这些指标生成更高质量的数据，该数据在长上下文基准测试中表现出显著的性能提升。