研究人员开发了PhenoBench,这是一个可执行的基准测试,旨在利用人类表型项目(包含超过13,000名参与者)的数据来评估AI模型。该基准测试包含跨越15个领域和26种输入模态的90个临床基础任务,能够评估不同测量结果如何为健康相关问题提供信息。初步评估显示,虽然表格基础模型普遍优于标准的特定任务模型,但其总体改进幅度不大。语言模型在某些任务上也能在没有队列特定拟合的情况下进行有信息量的预测,尽管它们也表现出能力差距,并且很少能超越在相同数据上训练的模型。 AI
影响 为医疗保健领域的AI模型建立了一个新的评估框架,能够更标准化地比较它们在复杂人类健康数据上的性能。
排序理由 该集群描述了一个使用深度表型化人类队列的AI模型的新基准和评估框架,属于研究范畴。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- CatalyzeX
- Connected Papers
- DagsHub
- Gotit.pub
- Hugging Face
- Human Phenotype Project
- Influence Flower
- Litmaps
- PhenoBench
- ScienceCast
- scite Smart Citations
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →