Maayan Sharon

新的RATIO基准评估用于构思的科学文献检索

研究人员推出RATIO，一个旨在评估不同科学文献构思操作的检索系统的新基准。该基准将检索分为三种类型：Address（寻找问题的方法）、Broaden（检索更广泛的概念）和Specify（寻找具体的实例）。RATIO使用数百万篇全文论文构建，并采用新颖的语篇标记远程监督方法，通过LLM和人工验证进行增强，为训练和评估支持文献驱动的科学灵感的检索组件创建了一个可扩展的框架。