一篇新研究论文详细介绍了一个项目,该项目比较了三种基于大语言模型(LLM)的方法来分析英国研究与创新署(UKRI)的资助提案。研究题为“追踪明星与独角兽”(Tracking Stars and Unicorns),评估了GPT-4o、Mistral和一种名为DSIT-Taxonomies的自定义算法在提取研究实体和检测新兴主题方面的表现。结果表明,Mistral和GPT-4o表现相当且效果显著,Mistral在主题分类准确率上达到90.5%,高于DSIT-Taxonomies的71.4%。研究结果表明,Mistral是分析敏感资助数据的合适、高效且安全的选择。 AI
影响 Mistral在主题分类方面表现出的卓越性能,预示着其在高效准确分析研究资助领域大型敏感数据集方面的潜力。
排序理由 该集群包含一篇研究论文,详细介绍了针对特定任务的LLM方法的实验结果和比较。[lever_c_demoted from research: ic=1 ai=1.0]
在 arXiv cs.IR (Information Retrieval) 阅读 →
- Angelo Salatino Dr
- arXiv
- DSIT-Taxonomies
- GPT-4o
- Hugging Face
- mistral.ai
- OpenAlex Topics
- Tracking Stars and Unicorns
- UK Research and Innovation
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →