研究人员推出了 MolP2SBench,这是一个旨在评估大型语言模型(LLM)在从分子性质推断化学结构方面的能力的新基准。该基准通过向 LLM 展示带有掩码的分子骨架及相关性质,要求它们从一组合理的候选结构中选择正确的结构来测试 LLM。对七个模型的评估显示,虽然 LLM 可以利用物理性质进行结构预测,但它们的性能因性质类型而异,并且并不总是与人类化学家感知的难度一致。 AI
影响 该基准可能有助于开发更可靠的 LLM,用于分子发现和量子化学推理。
排序理由 该集群描述了一个新的基准和研究论文,评估了 LLM 在科学领域的能力。[lever_c_demoted from research: ic=1 ai=1.0]
- $^{13}$C NMR
- $^1$H NMR
- arXiv
- Astra
- Hugging Face
- LLMs
- magnetic resonance imaging
- MolP2SBench
- Property-Grounded Recovery
- ultraviolet–visible spectroscopy
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →