实体 MTEB(eng, v2)

MTEB(eng, v2)

PulseAugur coverage of MTEB(eng, v2) — every cluster mentioning MTEB(eng, v2) across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_128881 · Jul 7 · 04:00

CrossBERT架构分离表示与重建，实现可扩展文本编码器

研究人员推出了一种新颖的文本编码器架构CrossBERT，旨在克服BERT类模型的局限性。与BERT将表示学习与token重建混淆不同，CrossBERT将这两个目标分开。这种架构改变允许更高的掩码比例和改进的梯度收集，从而使吞吐量提高1.5倍至2倍，样本效率提高2倍。CrossBERT在MTEB(eng, v2)和frozen GLUE等基准测试中表现出持续的扩展性和卓越的性能。