Muennighoff et al.

嵌入模型是模式决策，而非配置值，需要仔细规划

为AI应用程序选择嵌入模型是一个关键的模式决策，而不是一个简单的配置选择。用于嵌入数据的模型决定了其含义，而稍后切换模型需要重新嵌入所有存储的数据，类似于数据库迁移。通过进行自定义评估而不是仅仅依赖排行榜可以提高性能，因为模型在不同的任务中表现出色。此外，理解模型特定的要求，如前缀、输入类型和最大令牌长度，对于获得最佳性能和避免静默降级至关重要。