EagleVLA 提出前景对齐异步推理,Jetson Orin 控制频率提升 14.71 倍

北京大学团队提出 EagleVLA,用“前景对齐异步校正”缓解 VLA 模型在 Jetson Orin 等低功耗设备上的推理延迟问题,并配套开源了基于 llama.cpp 的边缘推理引擎。

一句话看懂:北京大学团队提出 EagleVLA,用“前景对齐异步校正”缓解 VLA 模型在 Jetson Orin 等低功耗设备上的推理延迟问题,并配套开源了基于 llama.cpp 的边缘推理引擎。

事件核心:发生了什么

根据 alphaXiv 上论文摘要的信息,EagleVLA 针对 Vision-Language-Action(VLA)模型在低功耗板卡上部署难的问题展开优化。VLA 模型计算量大,直接放到 Jetson Orin 这类设备上会出现推理延迟高、控制频率低的情况。异步推理可以部分掩盖延迟,但会带来感知与执行错位、反应时间变长两个问题。

EagleVLA 的思路是训练一个轻量的未来校正模块,预测未来时刻的环境表征,使动作专家能从未来时间步出发预测动作;同时引入基于置信度的调度优化,自适应地平衡 VLM 与动作专家的调用。作者还构建了基于 llama.cpp 的推理引擎,包含 CUDA graph 复用、GPU 常驻中间缓冲和流展开等系统级优化。

论文摘要显示,在 Jetson Orin 上,EagleVLA 的控制频率相比原生 PyTorch 和 vla.cpp 分别提升 14.71 倍和 9.20 倍;在 LIBERO 基准上,成功率比 VLASH 高 14.8%。相关代码已在 GitHub 开源。需要说明,以上均为摘要中给出的实验结果,信息范围有限,论文尚未有公开的同行评审结论。

为什么重要

VLA 模型正从实验室走向机器人本体,但算力与实时性是落地的主要瓶颈。EagleVLA 的价值在于同时处理算法层面的异步错位和系统层面的推理效率,而不是单纯压缩模型或堆硬件。这为低成本边缘设备运行机器人策略提供了一条可参考的工程路径,也说明边缘推理引擎与算法协同优化正在成为 VLA 部署的竞争点。

对用户/开发者/创作者的影响

对机器人开发者而言,异步算法与边缘推理引擎分两个仓库开源,便于在自有硬件上复现和改造。对关注端侧 AI 的团队,其中 CUDA graph 复用、GPU 常驻缓冲等做法也可能迁移到其他实时推理场景。不过目前仅是论文层面的方案,实际部署效果还需结合具体硬件、任务和模型规模验证。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是开源代码的社区采用情况和真实设备上的复现结果;二是该方法能否扩展到更大规模 VLA 模型和更多机器人平台;三是异步推理带来的感知错位在复杂动态环境中是否仍有稳定性风险。

来源:alphaXiv

celebrityanime
celebrityanime
文章: 32454

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注