VideoNexus 论文:免训练框架让长视频推理省成本提精度

Hugging Face Papers 收录的论文提出免训练框架 VideoNexus,把长视频的细节感知与规划推理拆开,用压缩证据回传替代帧级上下文堆积;摘要称在 LVBench 上达到 88.6% 准确率,但这是论文自测结果,并非已上线产品。

一句话看懂:Hugging Face Papers 收录的论文提出免训练框架 VideoNexus,把长视频的细节感知与规划推理拆开,用压缩证据回传替代帧级上下文堆积;摘要称在 LVBench 上达到 88.6% 准确率,但这是论文自测结果,并非已上线产品。

事件核心:发生了什么

据论文摘要(发布时间为 2026 年 11 月 16 日),长视频理解通常要同时完成找证据、看清细节和整合答案,即便证据就在视频里,在又长又密的视觉序列中做这些操作仍会加重感知与推理负担。现有视频智能体可以按需抽帧,但把画面送回规划器,视觉信息仍会在推理上下文中累积。

VideoNexus 的思路是让规划器决定看哪里、解析什么、采样多密;感知子智能体在独立上下文中处理原生音视频,只回传紧凑、带时间定位的证据,供迭代搜索与核验。摘要称,规划与感知均使用 Gemini 3.8 Flash 时,该方法在完整 LVBench 上取得 88.6% 准确率,比同骨干的静态摄入高 3.6 个百分点,比内置智能体处理高 1.1 个百分点,API 成本约为后者的 44%;换用 Kimi K3 作为共享骨干时,在其评测中比官方 Video-GAIA ReAct harness 高 8.5 个百分点。

为什么重要

这项工作的价值不在“又一个长视频榜单分数”,而在于它把问题从“塞多少帧进上下文”转向“交换什么形态的证据”。如果压缩证据交换的思路成立,长视频 AI 应用的瓶颈可能从算力和上下文长度,部分转向规划策略与感知子任务设计。对闭源大模型 API 而言,这也意味着同样的推理预算可能支撑更长的视频分析链路。

不过,目前公开信息仅为论文摘要,全文实验细节、复现条件和同行评审状态尚未核验,上述数据应限定在该论文的评测设置内理解。

对用户/开发者/创作者的影响

开发者可以关注其“免训练”定位:它不要求重新训练基座模型,而是通过多智能体编排调用现有模型,这对基于 API 搭建视频问答、监控检索、内容审核等应用的团队更具借鉴意义。创作者侧暂不宜期待现成工具,摘要没有给出产品化形态、开放接口或开源计划。企业采购时也应把“成本为对比方案的 44%”看作特定评测条件下的测量值,而非通用报价。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是论文全文是否公开更完整的消融实验与失败案例分析;二是该框架能否在 Gemini、Kimi 之外的模型上复现收益;三是社区是否出现可运行的开源实现或厂商跟进类似“证据回传”架构。

来源:Hugging Face Papers

celebrityanime
celebrityanime
文章: 36045

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注