蚂蚁集团开发了OmniTable,一个旨在简化大型语言模型数据准备流程的统一宽表系统。该系统在VLDB 2026工业赛道荣获最佳论文奖,管理着超过35 PB的训练数据,显著提高了效率。OmniTable通过将数据呈现为单个逻辑宽表来重组数据,并将特征视为系统资产,从而降低了数据定位、特征重新计算和结果可追溯性的复杂性。该系统还将错误隔离在记录级别,防止微小的数据异常导致整个处理批次中断,并通过算子融合等技术优化资源利用。 AI
影响 简化了LLM的大规模数据准备工作,有望加速模型开发周期并降低基础设施成本。
排序理由 数据系统的研究论文奖。[lever_c_research降级:ic=1 ai=0.7]
- Ant Group
- code
- International Conference on Very Large Data Bases
- OmniTable
- QbitAI
- supervised fine-tuning
- VLDB 2026
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →