NNsight

Qwen2.5-7B-Instruct模型在符号域中展现因果迁移能力

研究人员进行了一项预指定的构造确认测试，以研究在冻结的Qwen2.5-7B-Instruct模型中符号域内的因果迁移。研究聚焦于特定路径“integer_mod16--letters16--successor->predecessor”，该路径通过了两个PyVene分割，确认交并集p值为0.000198。随后的NNsight实验在数值上复制了这些发现，确认了效应估计值和p值。