English(EN) Why Does Structured Output Fail? An Empirical Study of Prompt-Enforced Pydantic Schemas Across Nine LLMs

研究揭示了大型语言模型为何会生成结构化输出失败

作者 PulseAugur 编辑部 · [1 个来源] · 2026-10-27 04:00

一项发表在 arXiv 上的新研究调查了语言模型即使在提供了 Pydantic 模式的情况下，为何仍会生成结构化输出失败。该研究引入了一个详细的模式符合性失败分类系统，并将其应用于 OpenAI 和 Anthropic 的九种模型配置近 4000 次生成尝试。研究结果显示，尽管总体有效率可能看起来相似，但失败的根本原因可能因模式约束和特定任务而异，其中 markdown 围起来的 JSON 输出经常包含隐藏的字段长度违规。 AI

影响识别结构化输出生成中的关键失败模式，为大型语言模型应用的更好提示工程和验证策略提供信息。

排序理由学术论文分析大型语言模型输出失败。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

本文如何被排名

Signal score: 8 / 100; Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket: Tool; 学术论文分析大型语言模型输出失败。[lever_c_demoted from research: ic=1 ai=1.0]
Source corroboration: Single-source cluster; Only one publisher covered this so far. Single-source stories can still rank when the publisher is high-authority, but they lack cross-source corroboration.
Topics: paper, model release; Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance: High; Clearly on-topic for AI-industry coverage.
Story freshness: Same-day; Cluster formed today. Ranking reflects the current source set at time of score.

完整方法见我们的编辑标准。

报道来源 [1]

arXiv cs.CL TIER_1 English(EN) · Amit Verma · 2026-10-27 04:00

结构化输出为何会失败？一项针对九种大型语言模型的、强制执行 Pydantic Schema 的提示工程的实证研究

arXiv:2610.33949v1 Announce Type: cross Abstract: Pipelines that require structured outputs from hosted language models often specify a Pydantic schema in the prompt, validate the response, and retry when validation fails. Although native structured-output modes provide an altern…

本文如何被排名

报道来源 [1]

结构化输出为何会失败？一项针对九种大型语言模型的、强制执行 Pydantic Schema 的提示工程的实证研究

相关实体

相关话题