Harness-S提出兄弟执行框架训练法:把修复经验迁移进单一策略

Hugging Face Papers 收录的论文提出 Harness-S,用同一基座演化出的多个“兄弟 harness”定向修复执行失败,再把能力迁移进单一策略,让模型回到原始 harness 后依然更有效。

一句话看懂:Hugging Face Papers 收录的论文提出 Harness-S,用同一基座演化出的多个“兄弟 harness”定向修复执行失败,再把能力迁移进单一策略,让模型回到原始 harness 后依然更有效。

事件核心:发生了什么

根据论文摘要(发布于 2026-11-03,全文实验未在素材中核验),研究团队观察到 harness 演化具有局部性、互补性和非稳态性:不同变体修复不同失败,且其效用会随策略学习而变化。因此他们没有追求“通用最优 harness”,而是提出 Harness-S。具体做法包括:沿不同修复方向训练专门的兄弟 harness,形成固定的 Sibling Harness Pool;只有当基座 harness 下所有初始尝试都失败时,才触发 Complementary Harness Rescue Training,让同一策略在选中的辅助 harness 下生成新 rollout,替换失败组用于强化学习;同时用 Adaptive Harness Router 基于 Harness Behavior Profiles 和多 LLM 投票选出 Top-k 变体,并随策略学习刷新证据。在 AppWorld、SWE-Gym 和 DBBench 上,训练后的策略回到原始基座 harness 时,表现明显优于仅训练策略的基线。

为什么重要

这类工作把 harness 从“一次性调试外壳”变成可复用的训练资源。对智能体训练而言,真正的难点往往不是策略本身,而是执行环境与工具接口的设计。Harness-S 的思路是承认没有万能 harness,转而利用多个互补变体的失败修复信号,最终仍把知识沉淀到单一策略中,而不是绑定某个特定外壳。这为通用 agent 训练提供了一条更务实的路径,也可能影响后续 agent 评测和训练框架的设计。

对用户/开发者/创作者的影响

对开发者来说,如果这一方法后续被工程化,可能意味着训练 agent 时不必反复手工调 harness,而是可以维护一组定向修复变体,让路由器按策略状态自动选择。对使用智能体完成编码、网页操作等任务的团队,摘要中的结果表明,模型在原始执行环境下更稳,减少了“换壳才有效”的迁移成本。不过目前公开信息仅限摘要,尚无开源代码、API 或产品化功能可验证。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是论文是否公开完整实验细节与复现条件,尤其是三个基准上的具体提升幅度;二是 Sibling Harness Pool 与路由器能否被社区复用为训练工具;三是该方法在更多 agent 任务和不同基座模型上是否仍然成立。

来源:Hugging Face Papers

celebrityanime
celebrityanime
文章: 33136

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注