TinyVGG

从头开始训练的CNN模型与预训练模型相比存在显著差距

一项在Food-101数据集上比较两个卷积神经网络（CNN）的实验揭示了使用预训练权重的重要优势。从头开始训练的TinyVGG在30个epoch后仅达到23%的准确率，而利用ImageNet预训练权重并仅训练分类器头的ResNet50在同期内达到了超过65%的准确率。初始训练epoch就显示出显著差异，TinyVGG为2%，ResNet50为52%，凸显了预训练模型中嵌入的先验知识的价值。