实体
joint attention
joint attention
PulseAugur coverage of joint attention — every cluster mentioning joint attention across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新AI框架通过语义对齐和上下文感知增强图像编辑
研究人员开发了新的图像编辑框架，提高了语义对齐和上下文感知能力。IABEdit将可微分语义验证嵌入训练中，使生成器能更好地满足指令并保留上下文，在具有挑战性的基准测试中表现优于Gemini等专有模型。另外，‘overpainting’技术通过联合注意力机制和低秩适应来调整扩散模型，允许根据用户定义的trimap进行精确或宽松的编辑控制，并利用自动数据生成进行训练。
-
新研究详解多模态预训练的物理学和效率方法
研究人员探索了多模态预训练的基本机制和设计空间，重点关注不同模态在统一训练过程中如何相互作用。他们的实验揭示了知识流动的见解，其中语言、视觉理解和视觉生成以不同的模式跨模态地转移知识。该研究还确定了促进模态之间协同作用的架构选择，例如共享注意力机制和具有模态特定前馈层的归一化，并证明了早期统一模态比后期对齐更有效。这些发现促成了高效的预训练方法，在显著降低计算成本的情况下实现了强大的生成性能，并通过在万亿级标记上训练大型 MoE 模型得到了验证。