REINFORCE++

MICA框架通过新颖的强化学习方法增强LLM情感支持对话

研究人员推出了一种新颖的强化学习框架MICA，旨在提高大型语言模型在多轮情感支持对话中的表现。这种无需批评者的方法通过从共享势函数中推导即时和延迟信用，来解决稀疏奖励和信用分配不佳等挑战。MICA利用增量距离奖励进行逐轮优化，并利用其蒙特卡洛回报来处理延迟效应，在Qwen模型测试中，在EMPA、EQ-Bench和EmoBench等基准测试中表现出显著的改进。