实体
TAT-QA
TAT-QA
PulseAugur coverage of TAT-QA — every cluster mentioning TAT-QA across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 3
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 3 条
-
新方法检测LLM在金融问答中的自信性幻觉
研究人员开发了一种方法来检测用于金融问答的大型语言模型(LLM)中的自信性幻觉。通过分析内部模型状态,特别是残差流上的线性探针,他们可以识别出LLM以高确定性呈现的不正确答案。该技术在FinQA基准测试上显示出比基线方法显著的优势,AUROC达到0.68-0.77,而基线方法为0.55-0.63。研究结果表明,这种探针方法可以作为高风险金融应用中人工审查的成本效益高的初步筛选系统。
-
新型小型语言模型实现多跳推理下的忠实问答
研究人员开发了OCC-RAG,这是一系列旨在实现忠实问答的小型语言模型(SLM)。这些模型在一个包含超过三百万个示例的新型数据集上进行训练,重点关注多跳推理和上下文遵循。OCC-RAG模型,包括0.6B和1.7B参数版本,在特定的问答基准测试中,展现出媲美甚至超越大型通用模型的性能。
-
新的基准测试和智能体RAG提升LLM金融分析能力
研究人员开发了FINESSE-Bench,这是一个新的基准套件,旨在层次化地评估大型语言模型的金融领域知识和技术分析能力。该套件包括受专业金融认证和交易任务启发的专业基准测试,旨在评估不同难度级别和计算能力下的性能。同时,另一项独立研究引入了FinAgent-RAG,这是一个智能体检索增强生成框架,它使用迭代检索-推理循环和自我验证来进行金融文档问答。FinAgent-RAG包含一个专门的检索器、一个用于精确计算的思维程序推理模块以及…