CogBench

NeuReasoner 映射 LLM 推理极限，超越数学和代码

研究人员推出 NeuReasoner，这是一种新颖的诱导工具，旨在映射大型语言模型（LLM）推理能力的边界。该工具以理论为基础，灵感来自认知心理学和功能特异性，在不使用外部工具的情况下集成了内部模型模块化。NeuReasoner 在认知任务和标准基准上进行了评估，结果表明，在足够大的规模下，它可以在算术推理和代码生成等领域达到或超越基线性能。然而，该工具也揭示了局限性，特别是在仅通过诱导来恢复不确定性下的决策制定方面，并表明模型规模可…