研究人员调查了大型语言模型(LLMs)如何在内部表征作文质量,发现这些信息以一种线性可访问的形式编码在模型的表征中。这些信息在不同层级中逐步涌现,并且在不同的提示策略下保持稳健,甚至在不同的作文提示和评分标准之间部分转移。该研究还识别出与作文分数强相关的特定神经元,并且其行为对干预敏感,从而为理解基于LLM的自动作文评分系统的可解释性提供了新见解。 AI
影响 为自动作文评分的LLM可解释性提供了见解,可能提高教育评估的公平性和透明度。
排序理由 该集群包含一篇详细介绍LLM表征研究结果的学术论文。
- ASAP++
- Automated essay scoring
- Center for Spiritual and Ethical Education
- cross-prompt generalization
- dimensionality reduction
- Enem
- Hugging Face
- large-language models
- linear probing
- neuron-level analyses
- arXiv
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →