binary and ternary AI models

新的训练方法可实现二元和三元AI模型的高效设备端训练

研究人员开发了一种名为“$\Sigma\Delta$-Sampler”的新训练方法，该方法利用Ising求解器更有效地训练二元和三元AI模型。该方法将随机采样和退火步骤嵌入噪声整形循环中，有效地将噪声推离关键的自适应频带。该方法已在QUBO、CIFAR-10、ImageNet-1k和大型语言模型等各种基准测试中得到验证，在准确性方面取得了显著的改进，并大大减少了内存占用和训练时间。