RubricsTree

新的RubricsTree框架增强了个人健康AI代理的评估

研究人员开发了RubricsTree，一个旨在应对个人健康AI代理评估挑战的新框架。该系统利用了超过100个经过临床验证的等级分类的层级分类法，并通过分析4000个用户查询和专家医师的意见进行了优化。RubricsTree采用上下文感知路由器来激活相关的等级分类，以实现可扩展且与专家一致的评估，并在Gemini、GPT和Qwen等模型的HealthBench等基准测试中显示出显著的性能提升。