HunyuanVideo-13B
PulseAugur coverage of HunyuanVideo-13B — every cluster mentioning HunyuanVideo-13B across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
HEART框架提升视频扩散模型效率
研究人员开发了HEART,一个新颖的免训练框架,旨在提高视频扩散模型中稀疏注意力机制的效率。该方法通过根据去噪步骤中观察到的头部行为调整掩码刷新和阈值校准来解决头部异质性问题。HEART利用时间掩码重用(TMR)智能更新稀疏掩码,并利用误差引导预算校准(EBC)优化阈值,从而在无需模型重新训练或修改的情况下,改善质量-效率的权衡。
-
Sol-Attn 通过高效的稀疏注意力加速视频生成
研究人员开发了 Sol-Attn,一种新的无需训练的稀疏注意力方法,旨在加速视频生成模型的推理。与以往因僵化的路由或丢弃信息而难以兼顾效率和准确性的方法不同,Sol-Attn 在单次通过中统一了动态路由、稀疏计算和近似校正。这种方法允许动态但可控的块预算,而无需物化代理分数,并且它会重用未选定块的分数来近似其贡献。实验表明,Sol-Attn 在视频生成方面实现了高达 2.1 倍的速度提升,在视频编辑方面实现了 2.3 倍的速度提升,同…
-
新的DigenRL框架通过解耦强化学习加速扩散式生成大语言模型 · 跟踪3个来源
研究人员开发了DigenRL,一个解耦强化学习框架,旨在提高基于扩散的生成式大语言模型的效率。该新框架通过实现灵活的资源分配和兼容异构GPU来解决现有系统的局限性。DigenRL引入了生成轴流水线(GAP)和时间步长并行(TSP)等新技术,以改进rollout和训练之间的流水线操作,并结合了弹性Trainer-Assisted Generation(TAG)方法。实验表明,DigenRL显著提高了吞吐量,与当前最先进的系统相比,最高可…