作者开发了一个系统,以确保所有发送到LLM的文本都可以从日志中重建,解决了之前缺乏透明度的问题,即模型输入未被完全记录。这包括创建一个仅追加表来记录来自各种站点的事件,详细说明文本的来源、信任标签、字符数和负载。一个关键发现是发现了未计入的字符,包括来自未记录输入的提示缓存命中(prompt-cache hit)的显著66,570个字符,以及来自对话历史的另外20,864个字符。 AI
影响 通过实现模型输入的完全重建,增强了LLM应用程序的透明度和可调试性。
排序理由 该条目描述了为LLM输入开发特定的日志记录和重建系统,这是一个技术工具,而不是核心AI发布或研究。
- lanes.toml
- llm.ts
- MCP-servers/Vodou-Console/src/turn-events.ts
- migrations/090_turn_events.sql
- public/js/views/chat.js
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →