教科书结构微调让数学推理提升16.7%
推荐指数 66.0 NO. 030 · 2026.11.13
upvotes39comments2
简介
TOME-Math从2118本大学数学教材中提取38万条结构化证明监督记录,保留章节顺序、命题-证明关联和依赖引用。数学微调数据首次系统性保留课程逻辑结构,而非简单flatten成题解对。
媒体预览
编辑判断
之前做数学微调的数据集比如GSM8K、MATH都是孤立题解对,模型学的是模式匹配而非证明逻辑。TOME-Math的关键是把教材的依赖图显式保留,让模型能看到定理A被定理B引用时的evidential chain,这更接近人类学数学的方式。
16.7个百分点的提升是在base model上做的,说明数据结构的增益独立于模型scale,这对算力有限的小团队很友好。不过38万条记录只覆盖大学核心数学,工程落地要看能不能扩展到应用数学和交叉领域。代码和语料是否开源摘要没提,建议去项目页确认。