PulseAugur
实时 11:06:06
English(EN) Is Model Instability just Noise to be Tolerated or a Property that can be Managed?

新研究解决软件分析中的模型不稳定性问题

一篇来自arXiv的新研究论文探讨了软件分析中模型不稳定性问题,即同一分析重复运行时可能产生不同结果,从而降低了信任度。研究发现,最先进的优化器在测试用例上的一致性仅为13.7%。然而,通过调整标签支出、模型复杂度和评分方法等参数,研究人员实现了模型一致性提高4.8倍,并提升了推荐质量。该论文认为,模型不稳定性应作为性能之外的标准评估指标,并提出了衡量和管理其的方法。 AI

影响 这项研究通过提供衡量和管理不稳定性问题的方法,有望在软件分析领域带来更可靠、更值得信赖的AI模型。

排序理由 该集群包含一篇详细介绍新发现和新方法的论文。[lever_c_demoted from research: ic=1 ai=0.7]

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新研究解决软件分析中的模型不稳定性问题

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Amirali Rayegan, Lunxiao Li, Tim Menzies ·

    Is Model Instability just Noise to be Tolerated or a Property that can be Managed?

    arXiv:2607.10420v1 Announce Type: cross Abstract: In software analytics, rerunning the same analysis twice often yields different models and conclusions. This reduces trust in the model and limits its use. We find that model instability is a major problem. Across 127 multi-object…