研究人员开发了一种名为PEEL(Peeling Embeddings to Extract Latent ontologies)的新方法,该方法利用俄罗斯套娃表示学习(MRL)嵌入来构建分类法。该方法发现,MRL嵌入中的前缀长度与黄金分类法的粒度一致,这种模式在不同的MRL模型中都有观察到。PEEL使用在有序嵌入目标上训练的最小探针来解码冻结嵌入中的分层结构,在OLLM基准测试中成功地以高保真度恢复了分类有向无环图,并且无需目标边监督即可迁移到新领域。 AI
影响 这项研究可以简化知识密集型NLP任务的分类法构建,减少对昂贵、特定领域训练的需求。
排序理由 该集群包含一篇学术论文,详细介绍了一种从检索嵌入中提取本体结构的新方法。
- alphaXiv
- arXiv
- CatalyzeX
- Connected Papers
- CORE Recommender
- DagsHub
- Gotit.pub
- Hugging Face
- Litmaps
- Matryoshka Representation Learning
- ScienceCast
- scite Smart Citations
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →