software analytics

新研究解决软件分析中的模型不稳定性问题

一篇来自arXiv的新研究论文探讨了软件分析中模型不稳定性问题，即同一分析重复运行时可能产生不同结果，从而降低了信任度。研究发现，最先进的优化器在测试用例上的一致性仅为13.7%。然而，通过调整标签支出、模型复杂度和评分方法等参数，研究人员实现了模型一致性提高4.8倍，并提升了推荐质量。该论文认为，模型不稳定性应作为性能之外的标准评估指标，并提出了衡量和管理其的方法。