TESTNAV

新的TESTNAV框架增强了AI模型鲁棒性测试

研究人员开发了TESTNAV，一个旨在提高深度学习模型组合鲁棒性测试效率的新框架。该框架通过采用帕累托引导搜索，解决了组合爆炸和生成不切实际测试用例的挑战。TESTNAV通过同时最大化性能下降和保持输入保真度（使用SSIM和chrF等指标），优先识别严重但现实的故障。该系统利用NSGA-II算法来逼近双目标帕累托前沿，在视觉、语言和代码生成基准测试中展示了显著的加速和对扰动空间的探索减少。