无奖励也能造房子:SEE 让智能体学会主动掌控环境

alphaXiv 上出现一篇论文,提出不依赖外部奖励、通过“赋权最大化”训练智能体的方法 SEE,在 Crafter 等环境中出现收集资源、制作工具乃至造房子的行为。它值得关注,因为它把赋权研究从表格设定推到了更接近真实规模的技能学习场景。

一句话看懂:alphaXiv 上出现一篇论文,提出不依赖外部奖励、通过“赋权最大化”训练智能体的方法 SEE,在 Crafter 等环境中出现收集资源、制作工具乃至造房子的行为。它值得关注,因为它把赋权研究从表格设定推到了更接近真实规模的技能学习场景。

事件核心:发生了什么

2026 年 10 月 9 日,alphaXiv 页面展示了一篇题为《Scaling Empowered Agents》的论文。作者提出一种可扩展的赋权最大化方案:赋权对应一个状态能执行多少种技能,最大化赋权就是让智能体趋向“适合启动很多技能”的状态。方法名为 SEE,内部使用 Contrastive Successor Features 做技能学习,再训练第二个策略去寻找选项丰富的状态。在 Crafter 中,无外部奖励的智能体每个 rollout 完成 22 项成就中的 7 至 8 项;定性示例还显示它用植物和制作台搭出类似房子的结构,并躲避或击杀敌人。目前公开信息显示,这些结果基于论文摘要和实验描述,尚未经过同行评审,也不代表已有产品上线。

为什么重要

过去多数赋权研究停留在表格环境,难以验证理论上预测的资源收集、环境改造和生存等行为。SEE 把技能学习当作赋权估计器,而非赋权本身,从而让赋权可以在更大规模上研究。它与其他方法的关键区别是:VIM 和 LatentGCE 用开环动作序列,SEE 测量的是由闭环、反应式技能库可达的未来。这为无监督强化学习提供了一条不依赖任务奖励的路径,也和大模型智能体、技能库、具身智能等方向有潜在交集。

对用户/开发者/创作者的影响

对开发者而言,SEE 的代码和网站已公开,可作为技能学习与内在动机奖励的参考实现。它的赋权估计基于选定状态特征,例如 Craftax-Classic 只关注 12 个库存特征,不包含生命、饥饿和口渴,因此实际迁移到其他环境时需要重新设计特征集。对创作工具和企业采购来说,目前还谈不上直接可用,但若后续在真实机器人或游戏 AI 中验证,可能减少对人工奖励函数的依赖,降低训练数据的标注成本。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是 SEE 能否在更复杂、连续控制环境中复现稳定效果,而不只是 Craftax-Classic;二是赋权定义依赖特征选择,团队是否给出更通用的特征学习方案;三是论文所述网站和代码是否持续更新,以及是否有同行评审或独立复现结果。目前公开信息有限,不宜把它解读为通用智能的突破。

来源:alphaXiv

celebrityanime
celebrityanime
文章: 29010

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注