variational auto-encoder
PulseAugur coverage of variational auto-encoder — every cluster mentioning variational auto-encoder across labs, papers, and developer communities, ranked by signal.
- instance of Variational Autoencoders 90%
- instance of autoencoder 90%
- competes with generative adversarial network 70%
- affiliated with generative adversarial network 70%
- instance of Latent diffusion model 70%
- used by Flux 70%
- competes with principal component analysis 70%
- used by CatalyzeX 60%
- instance of alphaXiv 60%
- used by principal component analysis 50%
- used by generative adversarial network 50%
20 天有情绪数据
-
新AI模型从DNA甲基化数据推断人类衰老轨迹
研究人员开发了一种新颖的计算流程,用于从DNA甲基化数据推断人类衰老轨迹。这种两阶段方法利用变分自编码器将甲基化谱映射到时间潜空间,然后采用正则化不平衡最优传输(RUOT)来模拟该空间内的连续变化。DeepRUOT框架允许模型适应群体层面的变化并重构不同的生物衰老原型,为模拟分子衰老提供了一种生成方法。
-
新的FDRMFL框架增强了在非独立同分布数据上的多模态联邦回归
研究人员推出了一种新颖的框架FDRMFL,专为联邦回归任务中的多模态特征提取而设计,特别解决了非独立同分布(non-IID)数据带来的挑战。该框架采用了一个包含四个项的局部目标函数:MSE预测损失、互信息代理、用于跨模态分布对齐的对称KL惩罚项,以及用于将局部表示锚定到全局共识的对比损失。在合成和真实世界数据集上的实验表明,FDRMFL的有效性,与PCA和VAE等传统方法相比,平均MSE显著降低,并且优于FedAvg和FedProx等…
-
新的 L-GTA 模型增强了时间序列数据增强
研究人员开发了 L-GTA,一种用于时间序列数据增强的新型潜在生成模型。该模型基于具有 Bi-LSTM 主干和时间自注意力机制的变分自编码器构建,学习潜在表示并应用受控扰动。L-GTA 旨在提高潜在空间和数据空间转换之间的一致性,从而生成具有可预测签名的增强样本。评估表明,L-GTA 在下游预测任务中优于 TimeGAN 和 Diffusion-TS 等现有方法,与原始数据相比,预测误差最多可降低 27%。
-
将自由意志概念化为变分自编码器中的一个学习参数
本文提出将自由意志视为一个模型参数,而不是算法的二元状态,类似于变分自编码器(VAE)中的标准差(σ)。与语言模型的温度或强化学习代理的 epsilon(全局且由用户设置)不同,VAE 的 μ 和 σ 是输入相关的并且是学习到的。作者认为,VAE 中用于平衡泛化与过拟合的 KL 散度项代表了灵活性与约束之间的学习平衡,从而将自由意志形式化为每个维度的、学习到的属性。
-
新AI模型JEPAWG破译神经网络权重中的物理学
研究人员开发了JEPAWG,一种新颖的基于联合嵌入预测架构的权重生成器,旨在解释晶格量子场论中使用的超网络。该系统将耦合常数直接映射到流权重,创建一个可揭示物理结构的学习潜在空间。JEPAWG在内插和外推到未见耦合方面,表现出恢复内在维度、定位相变和编码有限尺寸偏移的能力,优于PCA和VAE等基线方法。
-
\lambda-VAE 解决了变分自编码器中的后验崩溃问题
研究人员确定了变分自编码器 (VAE) 中后验崩溃的两个主要原因:梯度不平衡和信息鸿沟。当解码器的重建信号比 KL 正则化压力衰减得更快时,就会发生梯度不平衡;当采样步骤丢弃了重要的编码器表示,降低了解码器的敏感性时,就会出现信息鸿沟。为了解决这些问题,引入了一种名为 \lambda-VAE 的新方法。该方法通过用每个维度的指数来缩放采样噪声来修改重参数化步骤,从而产生一种不对称性,将训练从崩溃转移到方差均衡状态。在 Binary M…
-
文本到图像模型通过ReChannel方法适配密集预测任务
研究人员开发了一种名为ReChannel的新方法,该方法利用大型文本到图像模型进行密集预测任务。ReChannel不生成新的RGB内容,而是将预训练模型适配为输出特定任务、像素精确的场。这种方法利用了像Diffusion Transformers (DiT)这样的模型的现有patch到token结构,将token映射到承载原生数量的输出patch。该方法在多个密集预测基准测试中取得了最先进的成果,包括无三联图抠图和KITTI深度估计,…
-
视频生成模型展现出固有的光照估计和能耗缩放能力
两篇新研究论文探讨了视频生成模型超越简单合成的能力。第一篇论文介绍了一个框架,该框架基于文本到视频模型的架构和生成参数来估计其能耗,并证明这些模型遵循可预测的缩放规律。第二篇论文揭示了视频生成模型本身就具备光照估计能力,可以通过将其视为引导式修复任务,利用这种能力从视频中重建动态环境地图。
-
MACRO方法增强了用于近景渲染的3D高斯泼溅技术
研究人员开发了MACRO,一种新颖的无训练方法,旨在提高3D高斯泼溅(3DGS)在近景渲染中的质量。该方法解决了特征尺度不不变性导致内容在不同尺度下出现错误对应关系的尺度差距问题。MACRO通过将场景分解为深度平面,在编码前将参考图像调整到匹配每个平面的尺度,并应用深度感知注意力掩码来实现这一点。这种方法不需要架构更改或额外训练,并在新的近景新视角合成基准测试中取得了最先进的结果。
-
新的无监督框架i-IF-Learn解决了高维数据挑战
研究人员开发了i-IF-Learn,一个新颖的无监督框架,通过同时进行特征选择和聚类来解决高维数据挑战。该方法识别对定义数据簇至关重要的影响特征,从而减轻了高维数据集中常见的噪声和不相关性。该框架的自适应特征选择统计量根据中间标签的可靠性动态调整,防止了迭代方法中常见的错误传播。实验表明,i-IF-Learn的性能优于现有的聚类基线,并显著提高了下游深度学习模型的性能。
-
新的 vsPAIR 架构通过不确定性量化增强逆问题求解能力
研究人员推出了一种新颖的变分稀疏配对自编码器 (vsPAIR) 架构,旨在解决逆问题并提供不确定性量化。该方法将标准的变分自编码器 (VAE) 与稀疏 VAE 配对,并通过学习到的潜在映射连接。变分结构有助于不确定性估计,而配对和稀疏编码则增强了结果的可解释性和结构。在盲修复、计算机断层扫描和热方程推理等任务上的实验证明了 vsPAIR 在具有结构化不确定性的逆问题求解方面的能力。
-
InverseCrafter框架可在无需VDM微调的情况下实现高效视频重捕获
研究人员推出了一种新颖的框架InverseCrafter,用于在无需对预训练视频扩散模型(VDM)进行大量微调的情况下生成视频的新视角。该方法将视频重捕获视为潜在空间中的逆问题,利用轻量级的潜在掩码编码器来避免计算成本高昂的训练和灾难性遗忘问题。InverseCrafter通过以最小的额外推理成本保留原始VDM的生成能力,实现了高效、高保真的视频修复和编辑。
-
新AI框架可进行不确定性量化的桥梁损伤精确识别
研究人员开发了一种新颖的、基于物理信息的高斯耦合变分自编码器(PI-GCVAE),用于识别桥梁损伤。该框架将可微分特征值求解器直接集成到VAE架构中,确保潜在空间样本遵循结构动力学原理。它还采用高斯耦合来模拟结构单元之间复杂的空间相关性,从而提高准确性并考虑系统变异性和测量误差。在合成桥梁数据上的验证表明,PI-GCVAE能够以77.2%的覆盖率准确恢复真实的后验分布,为早期损伤诊断提供了一个可靠的工具。
-
新推出的微型潜在上采样器 SesquiLSR 支持 AI 图像模型
一款名为 SesquiLSR 的新型、小型、快速的潜在上采样器已被开发出来,可用于各种 AI 图像生成模型。该上采样器旨在通过避免通常涉及的潜在表示上采样中的有损 VAE 往返来提高效率。SesquiLSR 被设计为双线性或双三次等基本上采样方法的替代品,可在保持速度的同时提供更好的质量。
-
PixWorld 在像素空间统一 3D 场景生成与重建 · 已追踪 3 个来源
研究人员推出 PixWorld,这是一种新颖的统一扩散模型,可在像素空间框架内处理 3D 场景生成和重建。该方法通过直接监督渲染图像上的扩散并结合几何感知损失以增强 3D 结构意识,绕过了与潜在空间方法相关的信息丢失和局限性。PixWorld 与现有的潜在空间生成技术相比表现出卓越的性能,并匹配了最先进的重建方法,验证了其统一像素空间范例的有效性。
-
Krea2 图像生成伪影已识别并开发出修复方案
一位 Reddit 用户在 Krea2 模型生成的图像中发现了一个反复出现的 2 像素网格伪影,尤其是在使用 Qwen Image VAE 或 Wan 2.1 VAE 时。此伪影在使用锐化等后处理技术时可能会更加明显。该用户为 ComfyUI 开发了一个 GLSL 节点,该节点充当陷波滤波器,通过检测和减去亮度变化来移除此网格图案,从而实现更清晰的图像输出。
-
新的X-VAE框架调整高斯先验以提升自动编码器性能
研究人员推出了一种新颖的框架——eXact-Prior Variational Autoencoder (X-VAE),旨在增强变分自编码器(VAE)。与依赖标准高斯先验的传统VAE不同,X-VAE利用从预训练自动编码器派生的数据自适应高斯混合先验。这种方法旨在更好地捕捉复杂的数据分布,从而提高重建准确性和生成样本的质量。X-VAE还包含一个潜在缩放因子,用于更精细地控制样本的多样性和保真度,使其适用于工业设计等需要精确生成的应用。
-
PRISM方法利用VAE潜在空间改进单图像反射去除
研究人员开发了PRISM,一种新颖的单图像反射去除方法,该方法在预训练变分自编码器(VAE)的潜在空间中运行。通过将反射去除视为潜在线性分离问题,PRISM利用FLUX骨架上的流匹配速度场来解耦透射层和反射层。该方法结合了潜在组合一致性(LCC)和层对比分离(LCS)损失,以改进解耦和语义分离,并在多个基准测试中展示了卓越的性能和泛化能力。
-
新AI框架增强地下矿石探测
研究人员开发了一种新的3D重磁反演框架,该技术对于地下矿石探测至关重要。该方法将问题重新构建为在Noddyverse数据集上的修正流,利用Ginzburg-Landau正则化器来辅助矿石识别并实现物理感知训练。该方法还引入了一种即插即用的引导方法,用于现有的无条件去噪器,并发布了一个用于3D密度的变分自编码器(VAE),以支持该领域的进一步研究。
-
AI 管道使用 LLM 进行办公室能源异常检测和建议
研究人员开发了一种代理式 AI 管道,旨在改进办公楼宇的能源异常检测。该系统结合了深度时间序列预测、变分异常检测和基于 LLM 的推理,以提供可操作的维护建议。该管道使用混合 SSA 和 LSTM 预测模型、用于异常标记的 LSTM VAE,以及带有上下文代理、诊断代理和报告代理的 LangChain 框架。评估表明,动态检索方法在保持性能的同时显著减少了上下文来源,并且一个 7B 参数模型成功处理了所有测试场景。