Tabarena
PulseAugur coverage of Tabarena — every cluster mentioning Tabarena across labs, papers, and developer communities, ranked by signal.
1 天有情绪数据
-
新研究比较表格分类的集成方法 · arXiv论文
一篇新发表在arXiv上的研究论文详细比较了用于表格分类任务的并行异构集成方法。该研究分析了来自OpenML CC18的56个中小型表格分类任务,并提出了一系列最佳实践建议。这些建议在TabArena数据集的另外28个任务上得到了验证,其表现显著优于单一最佳方法,并能媲美或超越单独的集成方法。主要发现包括Blending和Stacking方法的独立不一致性,以及Robust Soft Voting的特别成功,尤其是在多分类场景下。
-
CRUMB 通过上下文批处理提高 PFN 推理效率
研究人员开发了 CRUMB,这是一种新颖的推理包装器,旨在提高先验拟合网络 (PFN) 的效率。PFN 是强大的表格基础模型,可以执行上下文学习,但其自注意力机制会导致大型数据集的计算成本高昂的推理。CRUMB 通过聚类测试查询、使用 MMD 最小化选择分布匹配的训练子集,然后在这些缩减的批次上执行推理来解决这个问题。该方法与架构无关,在 TabArena 基准测试上显示出优于现有上下文选择策略的性能,并且对协变量漂移具有鲁棒性。
-
新框架以统计置信区间对AI模型进行排名
研究人员开发了一个新的分层框架,用于在排行榜上评估预训练模型,解决了不同任务之间性能的不确定性和可变性。该方法在任务和排行榜层面构建了统计上保证的排名区间,提供了更可靠的方法来量化模型性能并考虑变异性。在TabArena和PromptEval (MMLU)等基准测试上的实验证明了该框架能够为不确定性感知的模型排名产生信息丰富的区间。
-
TabPrep 管道通过特征工程增强表格机器学习基准测试
研究人员推出 TabPrep,这是一个旨在弥合表格机器学习基准测试中特征工程差距的新预处理管道。该管道包含针对特定数据模式的特征生成器,揭示了当前模型架构的局限性。集成 TabPrep 已在各种模型类型中展示出一致的性能提升,其增益常常超过仅靠模型中心化进展所带来的提升。
-
新模型和方法提升表格基础模型效率
研究人员正在开发新的表格基础模型(TFMs),以提高效率和性能。TabSwift通过行级注意力和可学习令牌增强了TabPFN架构,实现了具有竞争力的准确性和更快的推理速度。LimiX-2M是一个较小的模型,通过解决注意力瓶颈和使用新颖的令牌化框架,也优于较大的基线模型。此外,研究人员正致力于通过社区驱动的“速通”来加速TFM预训练,并压缩数据集以实现更快的推理和减少内存使用。
-
TabPFN-3 以速度和规模推动表格数据预测
一份新的技术报告介绍了 TabPFN-3,这是一种先进的表格数据基础模型,显著提高了性能和速度。该模型可扩展到拥有多达 100 万行训练数据的表格数据集,与前代模型 TabPFN-2.5 相比,训练和推理时间大大缩短。TabPFN-3 在包括 TabArena 在内的各种基准测试中均取得了最先进的结果,并在时间序列、关系型和表格-文本数据预测方面展现出更强的能力。
-
研究质疑用于解释表格模型性能差距的元特征
一篇新的研究论文探讨了为表格数据集选择最佳模型的难度,尤其是在表格基础模型出现的情况下。该研究使用 TabArena 基准测试分析了不同模型家族之间的性能差距,试图将这些差距与数据集元特征相关联。然而,研究结果表明,元特征预测器不够健壮,无法始终解释在所测试的各种表格数据集中的性能差异。
-
研究人员将大型AI模型蒸馏为更快的CPU就绪梯度提升树
研究人员开发了一种方法,可以将大型表格基础模型(TFMs)蒸馏成更小、更快的梯度提升树模型,这些模型可以在CPU上运行。该技术解决了TFMs的延迟问题,因为它们对于欺诈评分等实时应用来说速度太慢。通过使用分层离群教师标签来防止标签泄露,蒸馏后的模型达到了接近原始TFMs的性能,但推理时间却大大缩短。
-
TabPFN-3 模型提升表格数据预测和速度
一份新的技术报告介绍了 TabPFN-3,这是一款先进的表格数据基础模型,显著提高了性能和速度。该模型可扩展至包含多达一百万个训练行的数据集,并缩短了训练和推理时间,在 TabArena 等基准测试中表现优于现有模型。TabPFN-3 还将其能力扩展到时间序列、关系型和表格-文本数据,取得了新的最先进成果。
-
SAP 收购 Prior Labs,投资 11.8 亿美元打造领先的表格 AI 前沿实验室
SAP 宣布收购 AI 初创公司 Prior Labs,并计划在未来四年内投资超过 11.8 亿美元,将其打造成领先的前沿 AI 实验室。Prior Labs 专注于表格基础模型(TFMs),旨在更好地理解和预测电子表格等结构化数据的结果,SAP 认为这一能力将增强其企业 AI 系统。此次收购旨在利用 Prior Labs 在 TFMs 方面的专业知识,包括其开源模型 TabPFN,来加强 SAP 的内部 AI 开发。