Fréchet inception distance
PulseAugur coverage of Fréchet inception distance — every cluster mentioning Fréchet inception distance across labs, papers, and developer communities, ranked by signal.
10 天有情绪数据
-
人工智能为印度尼西亚Ulos纺织品生成新颖图案
研究人员开发了一个生成式人工智能框架,用于创作传统Ulos纺织品的创新图案。Ulos是印度尼西亚北苏门答腊省巴塔克人的文化遗产。通过在Ulos图案数据集上微调Protogen v3.4和Stable Diffusion v1.4,模型能够生成兼顾文化一致性和当代审美需求的图案。Protogen v3.4在视觉保真度和多样性方面表现优于Stable Diffusion v1.4。该研究还确定了生成高质量、多样化Ulos图案的最佳参数设置…
-
ContiStain框架通过MoE和关系保持蒸馏改进虚拟IHC染色
研究人员开发了ContiStain,一个新颖的框架,旨在提高虚拟免疫组织化学(IHC)染色模型在处理顺序采集数据时的性能。该方法利用混合专家(MoE)特征提取器创建一个域感知结构化特征空间,有助于最小化不同生物标志物域之间的干扰。此外,ContiStain采用关系保持蒸馏策略,在持续适应过程中保持跨域令牌级余弦相似度矩阵的一致性,从而减少先前学习到的生物标志物的遗忘。
-
AI模型在生成的城市场景中表现出地理偏见
一篇新发表在arXiv上的研究论文强调了AI生成的城市场景中存在显著的地理和多样性不足。研究人员评估了FLUX 1-schnell和Stable Diffusion 3.5 Large等扩散模型,通过生成美国各州和首府的图像。虽然模型能够捕捉州与州之间细微的地理差异,但一个通用的“USA”提示却生成了刻板印象中的大都市图像,未能充分代表沙漠、乡村和热带地区等多样化环境。
-
新的SAGE方法改进了文本到图像模型的安全对齐
一篇新发表在arXiv上的研究论文介绍了一种名为结构感知几何正则化(SAGE)的新方法,用于改进文本到图像扩散模型的安全对齐。目前的对齐技术常常依赖FID和CLIPScore等粗略指标,从而产生“高实用性错觉”,掩盖了语义准确性的显著下降。SAGE通过显式保留文本编码器提示嵌入的分布和关系结构来解决这个问题,从而在TIFA测量的结构化实用性方面取得了显著改进,同时保持了强大的安全性能。
-
Momentum Guidance 提升流模型图像生成质量
研究人员推出了一种名为 Momentum Guidance (MG) 的新技术,旨在提升流模型生成的图像质量。MG 通过在 ODE 轨迹上推断当前速度来工作,在保持每步标准计算成本(一次评估)的同时提高了样本质量。该方法在 ImageNet-256 等基准测试中,在 Fréchet inception distance (FID) 等指标上取得了显著改进,并证明了其在应用于 Stable Diffusion 3 和 FLUX.1-de…
-
ModaFlow框架通过模态感知引导增强虚拟试穿效果
研究人员开发了ModaFlow,一个用于高保真虚拟试穿的新型框架,可改善服装语义保留和身体几何适应性。该系统利用模态感知引导方案,通过图像提示适配器的服装视觉嵌入进行结构引导,并通过无分类器引导控制文本嵌入。为提高准确性,ModaFlow引入了方向一致性和感知真实性的正则化损失,以及用于处理各种遮挡场景和非配对推理的掩码操纵策略。
-
综述详述面向生成对抗网络的神经架构搜索
本文全面回顾了应用于生成对抗网络(GANs)的神经架构搜索(NAS)技术。文章对各种NAS方法进行了分类和比较,重点关注搜索策略、评估指标和性能结果。该综述强调了NAS在提高GAN性能、稳定性和效率方面的优势,同时也指出了当前的局限性和未来的研究方向。主要发现表明,进化算法和基于梯度的方法在某些场景下特别有效,并强调需要超越Inception Score(IS)和Fréchet Inception Distance(FID)的评估…
-
AI数据质量指标与人类感知和任务性能不一致
一篇新发表在arXiv上的论文探讨了自动化数据质量指标与其在深度学习模型(尤其是在地球观测领域)中的实际效用之间的脱节。研究强调,像FID和LPIPS这样关注视觉保真度的常用指标,并不总是与人类感知或下游任务性能一致。研究发现,像旋转这样的扰动会显著改变指标得分,而不会影响人类识别;并且在自动化指标上得分较低的合成数据,在与真实数据一起使用时,可以提高下游性能。作者总结认为,在评估地理空间应用的合成数据集时,应优先考虑人类评估和任务特…
-
AI研究:图像编码的自然度可预测但并非可迁移性的原因
研究人员调查了一维数据流生成的图像的视觉自然度与其在视觉骨干网络上的可迁移性之间的关系。他们的研究使用了WorldStream语料库,发现像Fréchet Inception Distance (FID)这样的指标可以预测准确性,但这种相关性并非因果关系。相位扰动等干预措施,在保持功率谱的同时改变局部结构,显示了局部结构与准确性之间存在很强的联系,这表明视觉模型能够识别自然图像和编码数据中的相似结构。
-
H-Adapter 通过注意力导出的蒙版改进姿态鲁棒的发型迁移
研究人员开发了 H-Adapter,一个旨在提高发型迁移准确性和鲁棒性的新颖系统,尤其是在源图像和参考图像在头部姿态上存在显著差异时。该系统利用区域特定的损失函数来分离头发和非头发元素,从而能够导出源对齐的发型蒙版来指导基于扩散的修复。实验表明,H-Adapter 在姿态变化下的 FID 和 CLIP-I 等指标上取得了优于以往的量化结果,同时还支持文本到图像生成和基于提示的头发颜色控制等扩展功能。
-
新的ALDM模型增强了胶质瘤的少样本3D MRI合成
研究人员开发了解剖条件潜在扩散模型(ALDM),这是一个专为高效、少样本3D体积MRI合成设计的新型框架。该模型采用两阶段过程,首先使用3D变分自编码器学习解剖先验,然后使用由ControlNet引导的肿瘤掩模条件化的潜在扩散模型,为数据稀缺的领域生成连贯的体积。在仅使用16张目标图像的极端少样本评估中,ALDM超越了GAN和混合基线,取得了85.40的优越Frechet Inception Distance(FID)和0.987的下…
-
研究发现常用的AI数据质量指标在地球观测领域不可靠
一项新研究表明,用于评估深度学习中合成数据集的常用数据质量指标并不可靠,尤其是在地球观测数据方面。像Fréchet Inception Distance (FID)等指标侧重于视觉保真度而非下游效用,并且可以通过人类观察者无法察觉的语义保持扰动显著改变。研究表明,在这些自动指标上得分较低的合成样本,在与真实数据结合时,仍然可以实现高感知真实度,甚至提高下游性能。研究结果强调了将合成数据集质量评估与人类感知和实际任务性能相结合的必要性。
-
DiffusionBench 基准和 NanoGen 框架挑战图像生成评估
研究人员推出了 DiffusionBench,这是一个旨在全面评估用于图像生成的扩散 Transformer (DiTs) 的新基准。该基准强调,目前主要关注 ImageNet 上类别条件生成的评估方法,与文本到图像生成任务的性能相关性不佳。为了促进这种更广泛的评估,他们还开发了 NanoGen,这是一个用于训练和评估 DiTs 的统一框架,使得文本到图像生成在计算上可与基于 ImageNet 的评估相媲美。研究结果表明,在 Imag…
-
新论文揭示生成模型FID分数存在显著随机性
一篇题为“FID彩票”的新论文调查了用于生成模型评估的Fréchet Inception Distance (FID)指标的可复现性。研究表明,使用不同种子重新训练模型对FID的影响比简单地从固定网络重采样大3.2倍。这种差异归因于随机初始化、数据排序和流匹配损失等因素。该研究提出了一个修订版的FID评估协议,包括每个单元格的最佳引导和跨多个训练种子的误差条,以解释这种固有的随机性。
-
扩散 Transformer 模型提高了自动驾驶场景预测的准确性
研究人员开发了一种用于预测自动驾驶汽车(AV)环境中未来场景的扩散 Transformer 世界动作模型。该模型使用紧凑的潜在世界模型预测长达 8 秒的场景潜在表示,然后由解码器将其渲染成图像。该方法在预测准确性和真实性方面显著优于标准的回归方法,通过 Fréchet Inception Distance (FID) 和 Kernel Inception Distance (KID) 等指标进行衡量。该模型展示了强大的动作可控性,规划…
-
AI安全方向可在无不安全数据的情况下跨模型迁移
研究人员开发了一种新颖的生成式AI跨模型安全引导框架,使得安全控制可以在不同模型之间迁移,而无需在目标模型上使用不安全数据。该方法从源模型学习一个可移植的安全潜在方向,并将其应用于目标生成器,同时保持生成质量。该方法还包括一个用于类别特定安全控制的多向量扩展,为AI安全机制提供了一条模块化和可重用的路径。
-
新研究质疑FID指标在图像生成质量评估中的可靠性
一篇新的研究论文提出重新评估用于评估图像生成质量的Fréchet Inception Distance (FID)指标。研究强调,FID分数可能具有误导性,因为较低的分数并不总是与更高的样本质量相关。这种差异部分归因于参考数据集的几何特性,与分散的数据集相比,集中的数据集显示出更有利的FID趋势,即使样本质量有所提高。
-
OpenAI 相关研究人员将 FID 集成到训练中,在 ImageNet 上取得低于 0.8 的分数
来自南加州大学、卡内基梅隆大学、香港中文大学和 OpenAI 的研究人员开发了一种名为 FD-loss 的新方法,该方法允许将 Fréchet Inception Distance (FID) 指标直接纳入图像生成模型的训练过程。该技术将统计计算与梯度更新分离,使得小型模型能够在 ImageNet 上实现低于 0.8 的 FID 分数。研究还表明,仅优化 FID 可能不总是能产生最佳的视觉效果,并提出了一个新的指标 FDrk,用于更鲁棒的评估。
-
PhysLayer 实现语言引导的、具有深度感知的静态图像动画
研究人员推出 PhysLayer,一个旨在从静态图像生成动画的新框架,该框架具有改进的物理真实感和深度感知能力。该系统使用语言引导将场景分解为不同图层,并结合基于深度的物理模拟,超越了二维平面运动。该框架通过整合模拟的对象轨迹和重新照明以实现时间连贯性来合成视频,在各种评估指标上显示出显著的改进。
-
OpenAI 推进一致性模型,实现更快、更高质量的 AI 生成
OpenAI 推出了 sCM,一种新的连续时间一致性模型方法,显著加快了生成式 AI 的采样速度。该方法简化和稳定了训练,使模型能够仅用两步生成与扩散模型相当的高质量样本,速度提升了约 50 倍。研究表明,sCMs 可以有效地与教师扩散模型进行扩展,并在 ImageNet 等基准测试中以更低的计算成本取得最先进的成果。