Tong et al.

新的 MoFore 框架推动自监督视频表示学习发展

研究人员推出了一种新颖的自监督视频表示学习框架 MoFore，该框架专注于从远距离上下文剪辑预测未来的潜在嵌入。与依赖像素级重建或语义对齐的先前方法不同，MoFore 学习时间预测表示。该框架结合了随机时间间隔预测和对比正则化，以增强鲁棒性并防止表示崩溃。在 UCF101 数据集上的实验表明，MoFore 在不需要动作标签的情况下学习到了时间上一致且语义上有意义的表示。