DecisionTraceBench

新基准DecisionTraceBench评估口语对话中的关键信息追踪

研究人员推出了DecisionTraceBench，这是一个旨在评估多方口语对话中关键信息追踪能力的新基准，特别是在金融等高风险领域。与侧重于转录或回合级预测的现有基准不同，DecisionTraceBench评估了跨多方的决策、说话人归属、范围和时间证据的联合演变。该数据集包括中文金融对话，包含合成和人工录音，初步实验表明当前系统得分相对较低，凸显了在理解信息来源和状态演变方面的局限性。