Geʽez script
PulseAugur coverage of Geʽez script — every cluster mentioning Geʽez script across labs, papers, and developer communities, ranked by signal.
1 天有情绪数据
-
新的MoVoC分词器改进了Ge'ez脚本语言的形态处理能力
研究人员开发了MoVoC(形态感知子词词汇构建),这是一种新颖的分词器,旨在更好地处理形态复杂的语言,特别是那些使用Ge'ez脚本的语言。该方法将监督形态分析与字节对编码等子词分词方法相结合,以在保持词汇意义的同时保留形态边界。该团队发布了四种Ge'ez脚本语言的标注数据和一个形态感知的词汇表,证明了在Tigre等语言的形态分割方面性能有所提高,即使是跨语言应用也是如此。
-
泰语、高棉语、韩语和埃塞俄比亚文字的OCR挑战详述
像泰语、高棉语、韩语和埃塞俄比亚语这样的文字的光学字符识别(OCR)面临着不同于标准拉丁字母文本的独特挑战。泰语OCR由于词语之间没有空格,在词语分割方面存在困难,需要基于词典的方法。高棉语OCR面临堆叠的辅音下标和可能被标准识别模型丢失或误解的小型变音符号的问题。韩语OCR因历史上混合使用谚文和汉字而变得复杂,在有限的谚文数据集上训练的模型可能会错误地替换汉字。埃塞俄比亚文字是一种音节文字,其字符家族内部存在系统性的混淆,这意味着错…
-
新的 VEXMLM 模型提升了非洲语言的性能
研究人员开发了 VEXMLM,这是一种新的语言模型,旨在提高低资源非洲语言(特别是使用埃塞俄比亚文字的阿姆哈拉语和提格利尼亚语)的性能。该模型解决了主要在拉丁字母脚本上训练的多语言模型中常见的词汇外比率高和子词碎片化问题。VEXMLM 使用自定义的 SentencePiece 分词器和扩展词汇表,在 19 种非洲语言的问答、命名实体识别和情感分析任务中取得了显著的进步。