Best-of-Evidence

新的Best-of-Evidence框架通过部分验证改进AI模型选择

研究人员开发了一个名为Best-of-Evidence (BoE)的新框架，以改进模型输出的选择，特别是在视觉-语言任务中，这些任务的候选者并非总是可以完全验证。BoE解决了部分验证的场景，在这种场景下，只有响应的特定方面可以被检查，并且声明可能出现在具有冲突立场的多个候选者中。该框架利用候选因子图和有限的证据行动预算来优化最终选择，理论上展示了剩余证据能力如何影响改进以及共享查询如何提供效率提升。