还在为大模型洗数据熬夜?蚂蚁拿下VLDB工业最佳论文,一套宽表搞定35PB语料,效率狂飙5.6倍
2026.09.02 · 事件 · 论文 · 媒体报道
蚂蚁集团研发的统一宽表系统OmniTable获VLDB 2026工业赛道最佳论文,管理35PB训练数据,端到端效率提升5
蚂蚁集团推出统一宽表系统OmniTable,论文获VLDB 2026工业赛道最佳论文。该系统以“逻辑统一、物理分离”管理超35PB、3050亿条大模型训练数据,将真实SFT数据准备任务从约14天缩短至2.5天,手工步骤从45步降至12步,效率提升5.6倍。
- 管理35PB、3050亿条训练数据
- SFT任务周期从14天降至2.5天
- 手工步骤减少73.3%
- 算子融合减少55.9%CPU消耗
- 记录级容错避免整批任务失败
为什么值得看
解决大模型数据准备中的效率与成本痛点,工业界落地价值高。
适合谁关注
大模型训练数据工程师、AI基础设施团队、数据平台开发者