一句话看懂:研究团队发布论文,提出从互联网视频中提取并经过人形机器人执行验证的动作数据管线 Movens-5M,并训练出可同时理解文本、语音、音乐和视频、支持实时闭环执行的动作模型 Movens-Zero。
事件核心:发生了什么
据 alphaXiv 收录的论文页面,作者构建了 Movens-5M 数据集:1500 万条人类动作序列,其中 500 万条是经人形机器人重定向和执行验证、可物理执行的序列,总量超过 1 万小时,并与文本、RGB 视频、语音和音乐对齐。数据从原始网络视频经过片段生成、质量过滤、语义标注、动作恢复和物理精修等步骤生成。在此基础上,Movens-Zero 采用「理解—生成—执行」三层架构,单一动作专家经七类生成任务混合训练,支持从文本、语音、音乐、视频直接生成动作,并通过 Multimodal Real-Time Chunking 在指令和机器人状态持续更新时衔接重叠动作块,完成闭环执行。
为什么重要
人形机器人动作基础模型长期受限于高质量、可执行数据的稀缺:网络视频里的动作往往有噪声、与机器人身体结构不匹配,或物理上不可跟踪。Movens-Zero 的思路是把数据质量前置到管线中——经仿真中的跟踪策略验证后才算可执行样本,论文也报告从 1% 到 100% 扩展执行验证数据、动作专家从 6400 万扩展到 9.11 亿参数时,四种模态上均有提升。这为人形机器人领域的「数据规模化」提供了一条可复用的工程路线,而不只是把生成模型做大。
对用户/开发者/创作者的影响
目前公开信息显示,这仍是论文层面的工作,并非已上线产品。对开发者而言,值得关注的是数据管线和执行验证机制:它提示做具身智能应用时,训练数据的「可执行性」可能比数据量本身更关键。对内容创作者而言,文本、语音、音乐、视频四种条件输入意味着未来可能出现更自然的机器人交互接口,但真实机器人上的泛化表现仍需更多实测数据支撑。素材未说明代码或模型是否开源。
AI 工具推荐
想把多个 AI 模型放在一个入口?
GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。
推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。
值得关注的后续
一是 Movens-Intent 基准(四条轨道共 8192 组专家验证条件—动作对,统一使用 Unitree G1 目标)上的结果能否在更多机器人平台复现;二是真实机器人闭环执行的成功率和长时稳定性;三是数据管线与模型是否需要社区共建,才能支撑生态扩展。
来源:alphaXiv


