json5
PulseAugur coverage of json5 — every cluster mentioning json5 across labs, papers, and developer communities, ranked by signal.
-
LLM 输出的 JSON 解析器测试：jsonrepair 领先，JSON.parse 失败
对三个 JavaScript JSON 解析器——标准的 JSON.parse、jsonrepair 3.15.0 和 JSON5 2.2.3——的比较显示，它们在处理格式错误的 LLM 输出方面的能力存在显著差异。JSON.parse 能够正确识别无法恢复的错误，而 JSON5 只能修复简单的对象字面量。jsonrepair 3.15.0 表现出最强大的性能，成功修复了五种常见的 LLM 输出错误，包括尾随逗号、未加引号的键、注释以…
-
LLM JSON解析器难以处理截断输出；Toolkit Labs发布基准测试
Toolkit Labs发布了对旨在处理大型语言模型（LLM）错误输出的JSON解析器的基准测试结果。该研究聚焦于25个截断的JSON案例，即模型输出在流式传输过程中被截断。在Python和Node.js运行时中测试的21个解析器中，有12个得分零，未能恢复任何截断的输出。该公司自己的解析器jsonshim，在恢复25个截断案例中的23个方面，表现与json-repair相当。
-
Python JSON解析器在格式错误的LLM输出上的基准测试
对七个Python JSON解析器进行了基准测试，以评估它们在大型语言模型（LLM）格式错误输出上的性能。测试套件MALFORMED-300包含300个格式错误的JSON案例。结果显示，在可恢复的案例中，`json-repair`在数据恢复方面优于作者的工具`jsonshim`。然而，`jsonshim`在不可恢复的案例中采取了更严格的拒绝策略，这对于数据库条目或工具调用来说是更可取的，而`json-repair`总是返回一个值的做法…