InsightBench
PulseAugur coverage of InsightBench — every cluster mentioning InsightBench across labs, papers, and developer communities, ranked by signal.
1 天有情绪数据
-
ComInsight框架通过可验证的见解增强表格到报告的生成
研究人员推出了一种名为ComInsight的新型框架,用于从关系表中生成分析报告。该方法通过将过程重塑为原子证据的组合来解决发现可验证的复合见解的挑战。ComInsight将这些原子见解组织成一个多关系图,并使用组合运算符来构建更高阶的结论,确保每个输出都附带可执行的SQL和细粒度的出处,以实现完全可验证性。在事实正确性、新颖性和结构完整性方面,该框架在InsightBench、DDR-Bench和T2R-Bench这三个基准测试中,…
-
DataSTORM系统提升了LLM在结构化数据库上的研究能力
研究人员开发了DataSTORM,一个新颖的、基于LLM的代理系统,用于对大规模结构化数据库和互联网来源进行深度研究。与以往专注于非结构化网络数据的研究方法不同,DataSTORM采用了探索性数据分析和数据叙事的原理,以促进论文生成、量化推理和叙事发展。在InsightBench数据集上的评估显示,DataSTORM取得了新的最先进水平,在洞察力和摘要召回率方面有了显著提高。此外,在源自ACLED的真实世界数据集上,DataSTORM…
-
新的基准和架构推动 LLM 驱动的数据洞察发现
两篇新研究论文介绍了使用 LLM 和多代理系统增强数据分析中洞察发现的框架。第一篇论文 InsightEval 解决了现有基准的不足,并提出了一个新的数据集和指标来评估 LLM 驱动的数据代理。第二篇论文提出了一个多代理架构,用于在实时数据流上自主发现洞察,从而实现从被动分析到主动分析的转变。