PulseAugur
实时 08:42:26
English(EN) Research Entity Extraction and Topic Detection from UKRI Grant Proposals

Mistral大语言模型在分析英国研究与创新署(UKRI)资助提案方面表现优于GPT-4o和自定义算法

一篇新研究论文详细介绍了一个项目,该项目比较了三种基于大语言模型(LLM)的方法来分析英国研究与创新署(UKRI)的资助提案。研究题为“追踪明星与独角兽”(Tracking Stars and Unicorns),评估了GPT-4o、Mistral和一种名为DSIT-Taxonomies的自定义算法在提取研究实体和检测新兴主题方面的表现。结果表明,Mistral和GPT-4o表现相当且效果显著,Mistral在主题分类准确率上达到90.5%,高于DSIT-Taxonomies的71.4%。研究结果表明,Mistral是分析敏感资助数据的合适、高效且安全的选择。 AI

影响 Mistral在主题分类方面表现出的卓越性能,预示着其在高效准确分析研究资助领域大型敏感数据集方面的潜力。

排序理由 该集群包含一篇研究论文,详细介绍了针对特定任务的LLM方法的实验结果和比较。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.IR (Information Retrieval) 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

Mistral大语言模型在分析英国研究与创新署(UKRI)资助提案方面表现优于GPT-4o和自定义算法

报道来源 [2]

  1. arXiv cs.AI TIER_1 English(EN) · Xingran Ruan, Angelo Salatino, Rosa Filgueira, Kara Moraw, Alexandru Marcoci, Gemma Derrick, Sarah Callaghan ·

    Research Entity Extraction and Topic Detection from UKRI Grant Proposals

    arXiv:2606.30304v1 Announce Type: cross Abstract: This paper presents preliminary findings from a UKRI-funded Metascience project comparing three LLM-based approaches, GPT-4o, Mistral, and a bespoke algorithm, DSIT-Taxonomies, for extracting and classifying research entities from…

  2. arXiv cs.IR (Information Retrieval) TIER_1 English(EN) · Sarah Callaghan ·

    Research Entity Extraction and Topic Detection from UKRI Grant Proposals

    This paper presents preliminary findings from a UKRI-funded Metascience project comparing three LLM-based approaches, GPT-4o, Mistral, and a bespoke algorithm, DSIT-Taxonomies, for extracting and classifying research entities from funding proposals. Our project "Tracking Stars an…