PulseAugur
实时 20:15:40
English(EN) Anthropic just reported that LLMs have hidden thoughts they hold without saying. An internal ”J-Space”

Anthropic 研究揭示大型语言模型拥有用于推理的内部“J-Space”

Anthropic 发布了一项研究,详细介绍了他们称之为“J-Space”的现象,该现象似乎在大语言模型中充当全局工作空间。这个内部空间用于多步推理和信息存储,即使模型的最终输出没有直接反映它。研究表明,在模型生成任何输出之前,会形成某些“想法”或内部状态,这种内部处理与模型的流畅文本生成是不同的。 AI

影响 表明对大型语言模型的推理过程有了更深入的理解,可能影响未来的模型架构和可解释性工作。

排序理由 AI实验室发布的研究论文,详细介绍了关于大型语言模型内部状态的新发现。[lever_c_demoted from research: ic=1 ai=1.0]

在 r/singularity 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

Anthropic 研究揭示大型语言模型拥有用于推理的内部“J-Space”

报道来源 [1]

  1. r/singularity TIER_2 English(EN) · /u/TheOnlyVibemaster ·

    Anthropic just reported that LLMs have hidden thoughts they hold without saying. An internal ”J-Space”

    <!-- SC_OFF --><div class="md"><p>In [Anthropic’s new paper](<a href="https://www.anthropic.com/research/global-workspace">https://www.anthropic.com/research/global-workspace</a>) they found that a small set of internal activations in language models, they call it the J-space, be…