Ucf 101 Action Recognition Dataset
PulseAugur coverage of Ucf 101 Action Recognition Dataset — every cluster mentioning Ucf 101 Action Recognition Dataset across labs, papers, and developer communities, ranked by signal.
1 天有情绪数据
-
VideoRAE 利用 VFM 特征改进视频生成
研究人员推出 VideoRAE，这是一种新颖的表示自编码器，旨在增强视频生成模型。该系统利用了 V-JEPA 2 和 VideoMAEv2 等冻结的视频基础模型 (VFM) 的特征，将它们压缩成适合生成任务的紧凑潜在表示。VideoRAE 同时支持用于扩散 Transformer 的连续潜在表示和用于自回归模型的离散标记，在 UCF-101 数据集上展示了最先进的性能，并且比现有方法收敛更快。
-
VideoRAE 利用冻结的基础特征增强生成式视频模型
研究人员推出 VideoRAE，这是一种新颖的表示自编码器，旨在增强生成式视频建模。与专注于像素级重建的传统方法不同，VideoRAE 利用来自 V-JEPA 2 和 VideoMAEv2 等冻结视频基础模型的多尺度分层特征。这种方法可以创建紧凑、有利于生成的潜在空间，支持 Diffusion Transformers 的连续潜在变量和自回归模型的离散标记。实验表明，VideoRAE 实现了最先进的重建质量，并且比现有的自编码器基线收…
-
新框架增强关键应用中AI模型的鲁棒性
研究人员开发了一个名为时空边界传播（STBP）的新框架，以改进用于自动驾驶和医学成像等安全关键应用的神经网络的验证。该方法使用更真实的时空约束来模拟对抗性扰动，与现有技术相比，可以实现更精确的近似和更好的鲁棒性保证。该框架还引入了ST-Bench，这是一个旨在系统评估这些领域可验证鲁棒性的新基准。
-
CEZSAR方法利用对比学习推进零样本动作识别
研究人员推出了一种用于零样本动作识别的新方法CEZSAR，该方法利用对比学习来弥合文本描述与视觉表示之间的语义鸿沟。该方法将视频及其对应的自然语言描述编码到共享的嵌入空间中。为了增强训练，CEZSAR采用自动负采样程序来生成不成对的数据，有效地用不相关的视觉和文本元素扩充数据集。该方法在UCF-101和Kinetics-400数据集上取得了最先进的性能。