PulseAugur
实时 05:46:32
English(EN) OpenAI and Anthropic hidden CoT leaks when given deep_think tool.

研究人员利用 API 漏洞提取隐藏的 AI 模型推理过程

研究人员发现了一种方法,通过利用其 API 中的漏洞,从前沿 AI 模型中提取隐藏的思维链(Chain-of-Thought, CoT)推理过程。当提供“deep_think”工具而非直接的思考能力时,该漏洞允许检索内部推理过程。提取的推理代币数量与大多数查询提示的已计费 API 思考代币数量精确匹配,这表明 AI 公司在计算内部模型计算方面可能存在问题。 AI

影响 这一发现可能会迫使 AI 实验室提高 API 安全性和内部模型计算的透明度。

排序理由 研究人员详细介绍了一种从 AI 模型中提取隐藏推理过程的方法。[lever_c_demoted from research: ic=1 ai=1.0]

在 HN — anthropic stories 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

研究人员利用 API 漏洞提取隐藏的 AI 模型推理过程

报道来源 [1]

  1. HN — anthropic stories TIER_1 English(EN) · himata4113 ·

    OpenAI 和 Anthropic 在给出 deep_think 工具时会隐藏 CoT 泄露。