一篇新论文认为,由于其训练范式的固有局限性,大型语言模型(LLMs)在可靠的因果发现方面存在根本性的不足。研究人员已证明,监督微调和直接偏好优化等方法训练出的模型无法区分生成相似观测数据的因果图。为克服这一问题,该论文提出了一种“智能体式因果贝叶斯优化”(A-CBO)方法,该方法使用一个冻结的LLM作为干预式神谕,并通过外部贝叶斯循环将信念集中在候选图上,从而在不重新训练LLM的情况下实现可证明的收敛。 AI
影响 强调了LLM在科学发现方面推理能力的根本性局限,并提出需要新的智能体式方法来进行因果推断。
排序理由 该集群包含一篇学术论文,详细介绍了LLM的理论局限性并提出了一种新颖的方法。[lever_c_demoted from research: ic=1 ai=1.0]
- Agentic Causal Bayesian Optimization
- Causal discovery
- Corr2Cause
- direct preference optimization
- LLMs
- supervised fine-tuning
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →