一位开发者探索了使用带语法的约束解码来阻止LLM编造《联邦采购条例》(FAR)的条款编号。最初的尝试显示了很高的替换率,但在修改后,发现在面对需要特定条款编号的提示时,模型主要选择弃权或拒绝回答。虽然语法成功消除了编造的编号,但并未提高模型识别正确条款或区分真实与不存在条款的能力,导致高拒绝率而非准确检索。 AI
影响 约束解码可以保证不会出现编造的标识符,但不能保证准确性;检索增强可能仍然是必要的。
排序理由 开发者对LLM进行约束解码实验,以防止输出编造内容。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →