Revathy Venkataramanan

使用新的基准数据集评估LLM分析糖尿病食谱的能力

研究人员开发了一个新的基准数据集，用于评估大型语言模型（LLM）在确定食谱是否适合糖尿病患者方面的能力。该数据集包含7,607个食谱，其中适合和不适合糖尿病饮食的食谱数量近乎均等。使用直接查询、上下文引导和示例上下文提示进行的实验表明，能够根据饮食指南进行推理的模型表现更好，在测试的LLM中，Mistral-7B和LLaMA-70B表现出更优异的结果。