两篇新研究论文探讨了大型语言模型(LLM)的行为和预测能力的细微差别。第一篇论文 MedConstBench 提出了一个基准,用于评估 LLM 如何处理医学伦理,特别是当它们的行为受到“宪法”指导时。研究发现,这些“宪法”的影响是选择性的且依赖于模型,从而提出了一个自适应选择器来优化“宪法”的选择。第二篇论文研究了 LLM 在人机对话中预测用户决策的能力,特别是在用户可能食言的场景下。研究发现,LLM 相比于口头承诺,更能根据过去的 G行为预测决策,并且它们的预测未能完全捕捉到代理人个性和用户特征的影响。 AI
影响 这些研究强调了需要更复杂的 LLM 评估方法,重点关注伦理推理和复杂人机交互中的预测准确性。
排序理由 该集群包含两篇在 arXiv 上发表的学术论文,详细介绍了新的基准和关于 LLM 能力的研究。
- alphaXiv
- arXiv
- Beauchamp
- Big Tech
- CatalyzeX
- Connected Papers
- DagsHub
- Gotit.pub
- Hugging Face
- Litmaps
- LLMs
- MedConstBench
- MedDilemma
- medical ethics
- ScienceCast
- scite Smart Citations
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →