研究人员已经证明,当单个神经元接受自回归思维链(CoT)监督训练时,它可以模拟具有相同激活函数的任何前馈电路。这一发现表明,即使是简单的神经网络结构也能实现强大的计算能力。这项研究与加法组合学中的Sidon集有关,表明自回归阈值神经元可以模拟多项式时间图灵机,并且易于学习。作为实际演示,一个自回归ReLU神经元被训练以相当高的准确度模仿CIFAR-10数据集上的神经网络。 AI
影响 表明更简单的神经网络结构可能通过适当的训练方法实现复杂的计算任务。
排序理由 详细介绍神经网络表现力理论发现的研究论文。[lever_c_research降级:ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- Chain-of-Thought
- CIFAR-10
- computational learning theory
- DagsHub
- Gotit.pub
- Hugging Face
- IArxiv
- Joshi et al.
- ScienceCast
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →