Duy Minh Dao Sy

新数据集评估大型语言模型在越南传统医学方面的能力

研究人员开发了 VietMed-MCQ，一个旨在评估大型语言模型（LLMs）在越南传统医学方面能力的新数据集。该数据集是使用检索增强生成（RAG）管道和一种新颖的一致性检查机制生成的，以确保准确性。对七个开源模型的基准测试显示，具有强大中文先验知识的模型表现优于以越南语为中心的模型，表明了跨语言知识转移的潜力，尽管复杂的诊断推理对所有模型来说仍然是一个挑战。