DOCFORGE-BENCH

新基准揭示文档伪造检测中关键的校准失败问题

引入了一个名为DOCFORGE-BENCH的新基准，用于在零样本设置下评估文档伪造检测方法，即无需特定领域训练数据。该基准发现，当前方法存在严重的校准失败问题，尽管AUC得分适中，但由于文档图像中篡改像素比例很小，F1得分接近于零。在少量领域图像上调整单个阈值可以恢复相当一部分性能差距，表明阈值调整而非重新训练对于实际部署至关重要。研究还强调了缺乏涵盖生成式AI文档伪造的基准。