World-Model Drift Metric

AI代理指标无法区分适应和遗忘，开发者指出

一位开发者遇到了一个问题，他们的代理的世界模型漂移指标错误地将一个静态模型优于一个适应了变化的模型。这个问题，由论文《世界模型应该忘记什么？分层保留以实现持续适应》突出显示，发生是因为聚合指标无法区分必要的现实更新和有害的遗忘。开发者预测，未来的代理基准测试将需要报告不变回归率（事实永远不应改变）和修订延迟（应该改变的事实更新的速度）的分开分数，以及防止模型轻易被愚弄的附带修订度量。