LOOKAGAIN-ML

新研究强调图像编码器的“表征风险”

一篇新研究论文提出了预训练图像编码器中的“表征风险”概念，证明了不同的编码器可能导致下游预测任务的结果显著不同。该研究评估了包括SigLIP 2、ResNet50和DINOv2在内的十种编码器，应用于预测房价、赛马表现和医学诊断等各种场景。研究结果表明，没有一种编码器是普遍最优的，而一个涉及在锁定数据上进行基准测试和验证的建议工作流程可以提高预测性能和不确定性报告，该工作流程已在LOOKAGAIN-ML软件包中实现。