实体
Metamorphic testing
Metamorphic testing
PulseAugur coverage of Metamorphic testing — every cluster mentioning Metamorphic testing across labs, papers, and developer communities, ranked by signal.
总计 · 30天
0
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 3
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 3 条
-
MetaSpace框架测试具身AI智能体的空间认知能力
研究人员推出MetaSpace，一个用于评估具身智能体空间认知能力的新颖框架。该系统应用了软件工程中常用的变形测试（metamorphic testing）原理，通过逻辑规则和物理定律自动生成测试用例。通过将这些原理编码到Prolog中，MetaSpace通过检测预定义的变形关系（metamorphic relations）的违本来识别空间认知中的失败。在三个场景的评估中，MetaSpace在最先进的多模态大型语言模型（MLLM）驱动…
-
Metamorphic testing framework proposed for clinical AI models
研究人员提出了一个名为变形测试（MT）的新框架，用于评估临床机器学习模型的行为正确性。该方法评估模型是否与既定的医学知识一致，即使在标准指标（如AUROC）显示出高性能的情况下也是如此。一项使用MIMIC-III和MIMIC-IV数据集进行的试点研究表明，临床模型尽管预测得分很高，但MT违规率却很高，这表明可能存在临床上的不合理性。该研究表明，MT是确保医疗AI可靠性的一种有价值的补充传统指标的方法。
-
新的语义变异分数提升科学计算程序测试效果
研究人员引入了语义变异分数（SMS），这是一种旨在提高科学计算程序中变异关系充分性的新度量标准。与关注语法变更的传统变异分数不同，SMS 结合了领域特定的语义算子，以更好地识别真实的语义故障。研究发现，SMS 与现有的变异测试文献兼容，并且 LLM 生成的变异体提供了标准语法变异通常无法捕捉的独特故障类别。