LeanPRM用Lean自动标注步骤,训练无需人工的证明验证器

Hugging Face Papers 收录的论文提出 LeanPRM,借助 Lean 证明助手为自然语言数学证明自动生成步骤级标签,在没有人工标注的情况下训练步骤验证器,在多个基准上优于用 PRM800K 训练的同类模型。

一句话看懂:Hugging Face Papers 收录的论文提出 LeanPRM,借助 Lean 证明助手为自然语言数学证明自动生成步骤级标签,在没有人工标注的情况下训练步骤验证器,在多个基准上优于用 PRM800K 训练的同类模型。

事件核心:发生了什么

根据论文摘要,当前 AI 能写出较长且困难的数学证明,但逐步核验其正确性正成为瓶颈。训练一个步骤级验证器需要每一步的正确性标签,而开放式证明很难获得这类标签:人工标注成本高,从最终答案反推又不可行,把每个证明都形式化到 Lean 里则需要专家投入。

LeanPRM 的做法是让模型同时写出自然语言证明和配套的形式化证明,过程中不接收 Lean 的反馈;随后由 Lean 为每个步骤打标签,再由第二个模型过滤掉仅由形式化语法导致的失败,使负标签指向数学层面的错误。论文称该数据集包含 10,634 个证明、15.2 万个已标注步骤,且没有人工标注。在 200 个证明的留出集 LeanPRM-Bench 上,用其训练的 Qwen3-4B 验证器将精确步骤标签准确率从 48.2 提升到 74.7,而同一基座模型用 PRM800K 训练时为 60.3。

为什么重要

步骤级验证是 AI 数学推理走向可核查的关键环节。如果标签生产不再依赖人工,验证器就能随形式化数学题供给的增加而扩展,这对提升大模型在竞赛数学、形式化推理等场景中的可靠性有直接意义。论文还报告,该验证器在 IMO 级问题的最佳 N 选优中能选出更好的证明,并在四个外部验证基准中的三个上优于 PRM800K 训练的验证器,在 0.6B 到 8B 参数规模上均有提升。目前公开信息仅为论文摘要,尚未核验全文实验细节与同行评审状态。

对用户/开发者/创作者的影响

对开发者而言,LeanPRM 提供了一条用 Lean 自动生成训练数据的思路,降低了构建数学证明验证器的标注门槛,可能影响后续 PRM(过程奖励模型)的数据管线设计。对使用 AI 进行数学推理或教育场景的产品团队,步骤级验证能力可用于检查模型输出的中间推导,而不只看最终答案。不过,方法依赖模型能写出配对的形式化证明,对形式化能力较弱的领域和模型仍有约束。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是 LeanPRM 数据集与代码是否开源,以及社区能否复现摘要中的准确率数字;二是该方法能否扩展到更开放、形式化难度更高的数学与推理任务;三是有无团队将其用于训练更大规模的验证器或接入实际产品管线。

来源:Hugging Face Papers

celebrityanime
celebrityanime
文章: 29403

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注