Credal Large Language Models

新的 Credal LLM 改进了不确定性表示并减少了幻觉

研究人员引入了 Credal 大型语言模型 (CLLM)，以解决 LLM 生成自信但错误的答案的问题。与使用单一预测分布的标准 LLM 不同，CLLM 采用 LoRA 适配器集成来创建 Credal 集。该集合暴露了一系列合理的分布，从而可以推导出更好地反映不确定性的承诺分数。所提出的方法，Credal Token Commitment (CTC) 和 Semantic Commitment Consistency (SCC)，在 G…