研究人员发现,对于手写文本识别(HTR),自监督预训练中的像素重建方法比对比方法更有效。这是因为HTR中的判别信号集中在高方差像素方向上。该研究在五种语言的六个手写基准上测试了六种自监督学习方法,发现基于像素的方法实现了最低的字符错误率,并且在标签使用上更有效。当与预训练的LLM解码器结合时,一个固定的基于像素的编码器被证明与完全微调的监督基线具有竞争力。 AI
影响 这项研究表明,在自监督学习中关注高方差像素数据可以提高手写文本识别系统的效率和准确性。
排序理由 学术论文发表在arXiv上,详细介绍了一种新的手写文本识别方法。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →