Concept Failure Ratio

新的CAFD方法使用VLM进行高效DNN故障检测

研究人员开发了一种名为概念感知故障检测（CAFD）的新方法，用于识别深度神经网络（DNN）中的错误。CAFD集成了各种数据源，包括源自视觉语言模型（VLM）的新型“概念失败率”。该比率使用VLM从图像中提取文本概念，并评估其与DNN故障的联系，提供有价值的语义信息。CAFD在多个DNN模型和数据集上实现了18.3%的平均故障检测率提升，表现优于现有方法。