OrderDP

OrderDP框架通过无损数据剪枝加速AI训练

研究人员推出OrderDP，一个旨在通过动态剪枝数据来加速AI模型训练的新框架。该方法旨在将训练成本降低40%以上，同时保持近乎无损的性能和无偏的梯度估计。OrderDP通过首先随机选择一个数据子集，然后选择top-q个样本来实现这一点，为收敛和泛化提供了理论保证。该框架已在ImageNet-1K等数据集上得到实证验证，显示出具有竞争力的准确性和稳定的收敛性。