TOFU forget10

新研究探索先进的机器学习遗忘技术

研究人员正在开发新的机器学习遗忘方法，旨在无需完全重新训练即可从训练好的模型中移除特定数据的影响。一种方法是“局部附带遗忘”，该方法发现遗忘失败可能集中在要移除的数据附近，并提出“局部教师蒸馏”来缓解这种情况。另一个框架“表示遗忘”侧重于转换表示以压缩信息，从而实现更好的效用保留和效率。第三种方法“感知表示遗忘”使用激活签名来抑制内部表示，在对抗性实体恢复方面显示出显著的减少。