GARDEN 提出多智能体奖励自动设计:单一奖励程序可跨场景迁移

arXiv 上新论文提出 GARDEN,用大语言模型充当“奖励工程师”,为一系列相关协作场景设计同一套奖励代码,并原样迁移到训练时未见过的场景中,在 Overcooked 和 SMAX 基准上报告了明显提升。

一句话看懂:arXiv 上新论文提出 GARDEN,用大语言模型充当“奖励工程师”,为一系列相关协作场景设计同一套奖励代码,并原样迁移到训练时未见过的场景中,在 Overcooked 和 SMAX 基准上报告了明显提升。

事件核心:发生了什么

协作多智能体强化学习(MARL)中,智能体团队最终学到什么,很大程度取决于奖励函数。仅靠任务成功信号往往不够,研究者通常要手写中间奖励,而环境或团队一变,这套工作又要重做。2026 年 10 月 30 日公开于 arXiv 的论文提出 GARDEN(Generalist Autonomous Reward Design through Evidence Navigation):由 LLM 担任奖励工程师,查看环境代码、训练记录和智能体行为,写出奖励程序,并通过试训练验证草稿;学习算法和最终奖励的筛选规则保持固定,目标是用一个奖励程序覆盖一组相关场景,再原样迁移到设计阶段未出现的场景。

摘要给出的数据是:在 Overcooked 两个厨房布局上,任务回报相对默认奖励分别提升 58.2% 和 52.5%;SMAX 两个战斗场景的平均胜率从 51.0% 升到 89.9%。在候选奖励与探测预算相同条件下,GARDEN 的 84.2% 和 79.2% 分别高于固定诊断反馈与受 Eureka 启发的奖励反思方法。需要说明,以上仅为论文摘要信息,未核验全文实验,也不代表已上线产品或经过同行评审。

为什么重要

奖励设计是强化学习落地中人力成本高、可复用性差的一环。GARDEN 把“写奖励”从单场景调参改成面向场景族的程序生成与证据驱动筛选,若方法可复现,将降低多智能体系统在新环境中的调优门槛。它也在路径上与 Eureka 等 LLM 奖励生成思路形成对照:重点不是单次生成,而是跨场景复用和固定评测规则下的可比较性。

对用户/开发者/创作者的影响

对做机器人协作、自动驾驶仿真、游戏 AI 的开发者,这类研究提供了一种思路:把环境代码和训练日志作为 LLM 的输入材料,自动产出候选奖励,再通过试训练筛选。不过目前公开信息只覆盖两个基准和有限场景,离直接接入生产训练管线还有距离;团队若尝试复现,应关注算力开销、训练稳定性以及奖励代码的可审计性。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是全文是否披露更多场景族和失败案例;二是奖励程序在环境改动后是否仍保持迁移效果;三是社区是否出现开源实现或与现有 MARL 框架的集成。

来源:arXiv cs.AI

celebrityanime
celebrityanime
文章: 31256

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注