jina-embeddings-v5-omni

GELATO架构实现高效多模态嵌入

研究人员推出了一种新的多模态嵌入模型架构GELATO（Geometry-preserving Embeddings via Locked Aligned Towers，通过锁定的对齐塔实现几何保持的嵌入）。GELATO通过整合冻结的图像和音频编码器来扩展现有的文本嵌入模型，仅训练连接组件。这种方法实现了高效训练，并保持了原始文本嵌入的质量，同时在与更大的多模态模型相比时取得了有竞争力的性能。