实体 LoopMTP

LoopMTP

PulseAugur coverage of LoopMTP — every cluster mentioning LoopMTP across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_183274 · Aug 5 · 04:00

LoopMTP 引入循环 Transformer 和多词预测，以增强推理能力

研究人员推出 LoopMTP，这是一种新颖的循环 Transformer 架构，旨在以参数高效的方式增强推理能力。该模型在多次迭代中重复使用单个层堆栈，有效地模仿了更大模型的深度。LoopMTP 结合了多词预测来指导中间表示，将循环迭代与未来词预测对齐，并将准确率提高了高达 8.1%，优于基线模型。