RoTA-Bench:GPT-5.6-Sol 三维旋转对齐成功率仅17%,人类满分

Hugging Face Papers 收录的 RoTA-Bench 用交互式 3D 到 2D 投影对齐评测视觉语言模型的空间推理能力;在 100 项测试集中 GPT-5.6-Sol 仅成功 17%,而 20 名本科生集体完成后成功率达 100%。

一句话看懂:Hugging Face Papers 收录的 RoTA-Bench 用交互式 3D 到 2D 投影对齐评测视觉语言模型的空间推理能力;在 100 项测试集中 GPT-5.6-Sol 仅成功 17%,而 20 名本科生集体完成后成功率达 100%。

事件核心:发生了什么

2026 年 10 月 14 日,Hugging Face Papers 上线论文摘要,提出 RoTA-Bench。该基准要求模型观察一个被旋转的 3D 物体后,在有限动作预算内连续选择旋转动作,使物体投影与给定的目标轮廓重合。作者用自动化流程从 2D 图标构造出保持轮廓的 3D 物体,并用可逆初始化保证每个任务有解,最终生成 674 个任务,并分层抽取 100 个任务作为测试集。摘要给出的实验结果显示:GPT-5.6-Sol 在测试集上仅解决 17% 的任务,而 20 名本科生参与者合计完成测试集四次,成功率 100%。

为什么重要

现有视觉语言模型在识别、描述和图文匹配上进步明显,但 RoTA-Bench 指向的是另一类能力:把二维观测转成可支持精确动作的三维理解,包括推断几何、预判旋转效果、再借助视觉反馈修正动作。摘要还提到,图像空间的重叠改善未必等于姿态空间的对齐改善——在相同状态下,模型比人类更容易出现“轮廓更贴合、姿态却更差”的情况,分别为 19.4% 与 10.9%。这意味着评测若只看最终二维覆盖,可能高估模型的三维控制水平。目前公开信息显示,这是一项基准研究,尚不构成已上线产品功能或长期排名。

对用户/开发者/创作者的影响

对做机器人操作、3D 内容生成、AR/VR 交互和 AI 智能体的开发者来说,这项摘要提示:仅靠图像生成或大模型推理,并不足以直接支撑精确的 3D 动作控制。若后续代码与数据开源,RoTA-Bench 可作为训练与推理阶段的评测环节,帮助定位“能看图但控不准”的薄弱点。创作者侧的实际工具短期不会因此改变,但图像生成、三维建模与交互式编辑产品若引入类似任务,评测口径可能更关注动作序列而非单帧效果。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

可观察三点:一是该基准是否公开测试集、代码与评测协议,方便开发者复现 17% 与 100% 的差距;二是模型在细粒度旋转控制上的表现是否会随交互历史变化——摘要提到,移除细粒度控制后,模型 96.8% 的动作停留在 30 度粗粒度步长,任务成功率明显下降;三是图像生成、3D 建模与具身智能方向的团队是否会将其纳入模型训练或产品验收流程。

来源:Hugging Face Papers

celebrityanime
celebrityanime
文章: 29285

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注