BASIS-Bench

新的基准 BASIS-Bench 探测语音大模型中的偏见和个性化问题

一个名为 BASIS-Bench 的新基准已被开发出来，用于评估语音大模型在不诉诸刻板印象的情况下实现个性化交互的能力。该基准在三个维度上评估了人口统计学鲁棒性、刻板印象偏见和个性化能力。对八个近期语音大模型的评估显示，虽然许多模型能够识别人口统计学线索，但它们在恰当个性化响应方面存在困难，并且明确的人口统计学标签会放大现有的刻板印象关联。