一项新的研究论文指出了大型语言模型代码编辑能力中的“删除规避”问题,即模型倾向于保留应删除的代码。这种行为在 SWE-bench 基准测试中的领先模型中普遍存在,导致代码库更难维护。该研究引入了 CanItDelete 基准来专门测试删除任务,并发现即使是先进的模型也面临挑战,常常采用“守卫后撤”模式而不是直接删除。令人鼓舞的是,研究表明,使用以删除为重点的数据训练模型可以缓解这个问题并提高整体代码编辑性能。 AI
影响 突出了 LLM 代码编辑中的一个关键缺陷,这可能会阻碍企业采用,并且需要进一步的培训来解决。
排序理由 该集群报道了一篇新的学术论文,详细介绍了研究结果和一个用于评估 LLM 代码编辑能力的新基准。
- Amir M. Ebrahimi
- CanItDelete
- GPT 5.6 "Sol"
- Guard-and-Go
- large-language models
- SWE-bench
- Claude (Opus 4.8)
- DeepSeek V4-Pro
- GLM-5.2
- Hugging Face
- Kimi K2 Thinking
- Minimax M3
- Qwen3 235B
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →