Fengyuan Liu

新的BRIDGE框架根据模型性能预测AI任务完成时间

研究人员开发了一个名为BRIDGE 的新框架，该框架使用项目反应理论根据 AI 模型性能来预测人类任务的完成时间。该方法根据各种基准的性能数据估算潜在的任务难度和模型能力。该框架表明，潜在的任务难度与人类完成时间的对数呈线性相关，从而仅凭模型性能即可推断新基准的完成时间。这种方法可以预测未来的模型能力，并重现现有的指数级扩展结果，表明可解决任务的范围大约每六个月翻一番。