Anthropic的Opus 5在衡量真实智能的基准测试中碾压Fable 5和GPT-5.6 Sol

Anthropic 的 Claude Opus 5 在 ARC-AGI-3 基准测试中取得 30.2% 的分数,几乎是前纪录(OpenAI GPT-5.6 Sol 的 7.8%)的四倍。该基准专门衡量模型面对全新任务时的推理能力,团队认为差距来自 Opus 5 真正更强的逻辑推理,而非数据记忆。

一句话看懂:Anthropic 的 Claude Opus 5 在 ARC-AGI-3 基准测试中取得 30.2% 的分数,几乎是前纪录(OpenAI GPT-5.6 Sol 的 7.8%)的四倍。该基准专门衡量模型面对全新任务时的推理能力,团队认为差距来自 Opus 5 真正更强的逻辑推理,而非数据记忆。

事件核心:发生了什么

ARC Prize 团队于 2026 年 7 月 26 日公布最新结果:Anthropic 的 Claude Opus 5 在 ARC-AGI-3 基准上拿下 30.2% 的准确率,大幅领先 OpenAI GPT-5.6 Sol(Max)的 7.8% 以及 Anthropic 自家 Fable 系列模型(约 20%)。Opus 5 还成功解决了 25 个公开测试环境中的 6 个,其中 4 个达到或超过人类水平,并首次在测试中表现出将任务翻译为代数符号、独立构建反射方程等先前未见过的行为。

ARC-AGI-3 的设计类似交互游戏:模型必须从零推导环境规则,自主规划并执行行动。官方强调,该成绩仅计算语言模型本身的性能,不包含额外“辅助软件”。在更早的 ARC-AGI-1 和 ARC-AGI-2 上,Opus 5 也分别达到 97.5% 和 90.4%,匹配之前的最高分,只是成本略高。

为什么重要

ARC-AGI 系列基准的核心目标是衡量“真实智能”——即泛化到全新任务的能力,而非依赖训练数据中的类似模式。Opus 5 的表现意味着模型在逻辑推理、自主探索和失败恢复方面出现了质的飞跃。ARC Prize 团队将领先归因于“更强的逻辑推理,使模型能在陌生环境中更自主地探索、规划和执行”。这与单纯通过扩大参数或数据量获取的知识回顾式提升不同,可能指向推理能力上的范式变化。

独立研究员(如 Guanghan Ning)在另一私有基准 Witness 上测试发现,Opus 5 的增益较窄,部分场景甚至不如其上一代 Opus 4.8。但 ARC 团队和部分研究者指出,单一辅助基准的弱表现不能否定整体进步,因为 ARC-AGI-3 专门设计用来测试泛化,而传统谜题游戏更容易被特定数据训练“导向”。这一争议也表明:当前基准的针对性越强,越难判断模型是否真正获得了通用推理能力。

对用户/开发者/创作者的影响

对于开发者:如果 Opus 5 的推理能力能迁移到实际任务,意味着未来的 API 调用在解决未曾见过的复杂逻辑问题(如代码调试、多步决策、机器人控制)时可能有显著提升。但需留意成本:ARC Prize 提到 Opus 5 在上述旧基准上的成本“略高”,商业落地仍需评估性价比。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

对于企业采购:在需要高度自主推理的场景(如自动化流程设计、数据分析中的模式发现),Opus 5 可能是当前最强选择。但若任务高度依赖已知规则或常规推理,竞品(如 GPT-5.6 Sol 或 Fable 5)的成本或速度可能更具优势。

对于普通用户:实际感知可能有限——因为 ARC-AGI-3 是学术基准,并非日常应用。但 Anthropic 如果将该能力集成到 Claude 产品(如 Claude Code)中,用户未来在处理复杂推理任务(如学术问题、策略规划)时可能获得更准确的回答。

值得关注的后续

1. Anthropic 是否会公开 Opus 5 的训练细节?目前官方未解释提升原因,但 ARC Prize 团队推测是针对性标注数据和强化学习的结果。如果公司详细披露方法,可能引发竞争者对泛化推理的集中攻克。

2. 独立基准(如 Witness)与 ARC-AGI-3 的分歧需要更多第三方测试来弥合。后续若出现覆盖更广的新型泛化基准,或能更清晰判断 Opus 5 的真实能力上限。

3. 价格与落地节奏:Opus 5 在旧基准上成本略高,但若其新能力能在实际应用中带来效率提升,API 定价可能偏高。关注 Anthropic 是否会在 2026 下半年开放 Opus 5 的商用 API 以及具体费率。

来源:The Decoder AI News

celebrityanime
celebrityanime
文章: 15189

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注