用户对当前专注于编码大型语言模型一次性测试的现象表示沮丧。他们认为，衡量编码模型能力的更好标准是其在多步调试、修复和修改自身输出方面的熟练程度，这可能涉及对图像或视频的分析。用户正在寻求可以在本地运行的简单测试建议，以评估这些更复杂的调试技能。 AI
影响 建议改变评估编码AI能力的方式，从简单的测试转向更复杂的调试场景。
排序理由 用户观点文章，讨论LLM的评估方法。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
编码LLM评估需要多步调试，而非仅一次性测试
报道来源 [1]
-
I'm kinda tired of obsession for one-shot tests in coding, there are good tests for multi-step debugging with analyzing output/images/videos?
<!-- SC_OFF --><div class="md"><p>Personally, i think good coding model shouldn't be focused on one-shot "everything in one html-file" tests, but should be really good on debugging, fixing and modifying its own output. Anyone know such simple tests that i would able to …