Chathuri Jayaweera

新方法为NLI任务生成常识公理，提高LLM准确性

研究人员开发了一种为自然语言推理（NLI）任务生成常识知识公理的方法，并使用 Llama 3.1 70B 和 GPT-OSS 120B 等LLM评估了其有效性。引入了一种新颖的无参考LLM作为裁判框架来评估这些生成公理的事实性，揭示了模型之间显著的性能差异。一种选择性整合高度事实性公理的混合方法在SNLI和ANLI基准测试中展示了持续的准确性提升，性能提高了高达8.5%，并帮助模型克服了偏见。