low-level vision generalist models

Hidden-Shot 方法提升视觉模型在新任务上的泛化能力

研究人员推出 Hidden-Shot，一种旨在提高低级视觉通用模型单次任务泛化能力的新型机制。该方法利用隐式提示机制提取基于任务的信息，并将其与任务内处理相结合，以提高在新颖、未见过任务上的性能。为了全面评估泛化能力，开发了一个新的数据驱动框架 C/U 评估，其中包含常规和非常规任务的场景。实验表明，Hidden-Shot 在这些新任务上的表现优于现有的最先进模型，同时保持了在先前学习任务上的性能。