PDRVLA让VLA模型轻量预判物理动态,LIBERO成功率99.3%

2026年10月27日,Hugging Face Papers 收录了一篇提出 PDRVLA 的论文,用轻量物理动态模块替代在线视频生成,让视觉-语言-动作模型在动作决策前理解场景将如何变化,四组仿真基准成功率最高达到 99.3%。

一句话看懂:2026年10月27日,Hugging Face Papers 收录了一篇提出 PDRVLA 的论文,用轻量物理动态模块替代在线视频生成,让视觉-语言-动作模型在动作决策前理解场景将如何变化,四组仿真基准成功率最高达到 99.3%。

事件核心:发生了什么

据论文摘要,PDRVLA 面向现有 VLA 模型的一个短板:它们能根据视觉观测和语言指令生成机器人动作,但对物理动态的理解有限。视频世界模型虽然能刻画场景变化,却又要在控制回路里实时生成未来视频,延迟过高。

PDRVLA 的做法是引入一个轻量的 Physical Dynamics Module,从视觉-语言特征中提取“物理 token”,再以此约束动作生成,不需要在线生成未来视频。该模块的训练方式,是直接预测未来的 RGB、深度与光流特征,并用一个冻结的预训练视频世界模型做辅助监督。

训练数据全部来自公开数据,并通过人到机器人的合成、子任务标注以及具身思维链(ECoT)标注进行扩充。摘要给出的仿真结果是:LIBERO 99.3%、LIBERO-Plus 89.9%、RoboTwin 2.0 93.6%、SimplerEnv 81.5%。消融实验显示,加入世界模型监督后未来预测有所改善,同时评估了子任务条件、未来物体位姿监督和 ECoT 训练对动作成功率的影响。

为什么重要

机器人控制对延迟敏感,如果模型每次决策都要先生成一段未来视频,算力和响应时间都很难落到实际任务里。PDRVLA 试图把“预测未来”这件事压缩成一个轻量模块,把物理动态理解前置到动作生成中,这给 VLA 路线提供了一个不同于视频生成式世界模型的选项。

另一个值得注意的点是纯公开数据加大规模合成与标注的训练策略。具身智能长期受困于真机数据稀缺,如果这种组合能在更多任务上复现,会降低模型训练的准入门槛。不过目前所有结果都来自仿真基准,摘要也未说明实机验证情况。

对用户/开发者/创作者的影响

对做机器人应用的开发者,PDRVLA 的思路说明动作模型和世界模型不必强绑定在线视频生成,可以拆成更轻的模块,便于控制推理成本。做具身数据集和标注的团队,可以关注其 ECoT 标注和人到机器人合成流程是否会开放。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

对普通用户和内容创作者,这类研究短期不会直接变成产品功能,更多影响的是机器人操作、工业自动化等下游应用的成熟节奏。开源程度、代码与权重是否发布,目前公开信息不足,不宜提前假设可以上手使用。

值得关注的后续

一是论文是否公开代码、模型权重和训练数据构建细节;二是是否补充真机实验,仿真高成功率能否迁移到真实场景;三是与在线视频世界模型方案在延迟、算力占用上的横向对比数据。

来源:Hugging Face Papers

celebrityanime
celebrityanime
文章: 30577

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注