ProgramGym 发布 1648 个长周期编程训练环境,Qwen3 微调提升至 56.25%

Hugging Face Papers 收录的论文 ProgramGym 提出一套可扩展训练框架,自动从代码仓库构建 1,648 个可验证编程环境,让 AI 智能体像工程师一样从零写程序,而不仅是修 bug。微调后 Qwen3.8-27B 在 ProgramBench 上的成绩从 34.87% 提升至 42…

一句话看懂:Hugging Face Papers 收录的论文 ProgramGym 提出一套可扩展训练框架,自动从代码仓库构建 1,648 个可验证编程环境,让 AI 智能体像工程师一样从零写程序,而不仅是修 bug。微调后 Qwen3.8-27B 在 ProgramBench 上的成绩从 34.87% 提升至 42.84%,配合角色隔离工作流可进一步升至 56.25%。

事件核心:发生了什么

根据论文摘要,作者指出当前编程智能体多被用于修复仓库问题或按需求文档生成代码,但缺少可扩展、可验证的训练环境,让智能体自己发现需求、决定系统设计。为此,团队提出 ProgramGym 框架,由 Program-Env 和 Program-Agent 两部分组成。

Program-Env 通过反馈驱动循环,从代码仓库中构建可验证训练环境,修复运行时沙箱构建和黑盒测试质量。目前公开信息显示,该流程共构建了 1,648 个训练环境,覆盖 C、C++、Go 和 Rust 四种语言。Program-Agent 则把分析、实现和审查拆分给不同角色,并加入修订管理,用于编译检查和失败恢复。实验在 ProgramBench 上进行,微调后 Qwen3.8-27B 从 34.87% 升至 42.84%,加上 Program-Agent 后基础模型和 SFT 模型分别达到 55.71% 和 56.25%。

为什么重要

编程智能体的竞争正从“补全代码”转向“独立完成长周期开发任务”。从零构建程序比修 bug 更接近真实软件工程,要求智能体先理解参考程序,再自主规划、实现和验证。ProgramGym 的价值在于把这种能力变成可训练、可评测的规模化环境,而不是只靠人工设计的少量任务。对开源模型尤其关键:如果微调后能逼近或超过部分旗舰模型,说明高质量训练环境和智能体工作流可以部分弥补模型规模差距,这会直接影响开源与闭源模型在编程场景中的竞争格局。

对用户/开发者/创作者的影响

对开发者来说,这类框架未来可能改变 AI 编程工具的使用方式:从“帮我改这段代码”扩展到“帮我按参考程序实现一个完整项目”。若 ProgramGym 后续开源,团队可基于自己的代码仓库构造训练和评测环境,用于内部智能体微调或工具选型。对企业和创作者而言,值得关注的是可验证环境如何降低 AI 生成代码的检查成本,以及角色隔离工作流是否能减少编译失败和反复返工。不过,目前公开信息仍以论文摘要为主,尚未显示已有可直接使用的产品、API 或托管服务。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是 ProgramGym 是否按摘要所述开源,以及 1,648 个环境能否复现;二是 ProgramBench 上的提升能否迁移到更长、更复杂的真实项目和多语言仓库;三是角色隔离工作流与修订管理是否会被其他编程智能体产品借鉴,形成新的工程范式。

来源:Hugging Face Papers

celebrityanime
celebrityanime
文章: 28858

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注