Spanglish

新的PolyRoute基准测试多语言和混合语AI路由能力

研究人员推出了PolyRoute，这是一个旨在评估类型化决策路由模型在十二种语言和混合语文本中性能的新基准。该基准包含300多条不同语言和书写系统的支持消息，以及一个三方部门路由决策协议。初步结果显示，虽然经过微调的多语言模型达到了96.6%的准确率，但传统的TF-IDF结合逻辑回归达到了91.9%。该基准还突出了在混合语文本上的性能差异，其中一个以英语为基础的模型略微优于多语言检查点。