Theorizer

研究发现：大型语言模型在判断研究新颖性方面存在困难

一项来自艾伦人工智能研究所（Allen Institute for Artificial Intelligence）的最新研究，由Hugging Face发布，调查了大型语言模型在评估科学研究思路新颖性方面的可靠性。研究表明，提示词或评估设置中看似微小的改动，都可能导致大型语言模型对想法原创性的判断发生显著变化。研究还发现，检索和额外的推理并不能持续改进这些判断，而专门的新颖性评估系统的表现不如基础提示模型。