新论文质疑长上下文必要性:高频压缩下准确率几乎不降

一篇 2026 年 11 月发布的论文显示,前沿模型在频繁压缩上下文、每次只保留简短交接状态时,长程任务准确率几乎没有下降,并据此提出“语义状态空间模型”概念,直接质疑长上下文路线的必要性。

一篇 2026 年 11 月发布的论文显示,前沿模型在频繁压缩上下文、每次只保留简短交接状态时,长程任务准确率几乎没有下降,并据此提出“语义状态空间模型”概念,直接质疑长上下文路线的必要性。

Meta²提出一种元学习思路:不再离线优化一个共享的智能体框架,而是学习一份可复用的“元技能”,在每次长任务运行中指导框架在线调整。它在两个长程基准上取得素材所示的最好成绩,但目前仍是论文层面的方法,尚非已上线产品。

OpenAI于2026年11月3日发布博客称,两名员工用业余时间借助GPT-6 Astra,在不到一周内完成一款可与Codex交互的测试设备设计,并在一月内拿到小批量原型。这展示了AI辅助硬件研发的落地进度与边界。

Open Athena 作者 David Hall 于 2026 年 10 月 15 日发表文章,提出预训练受益于互联网上长期积累的公共文本,但后训练所需的“任务”没有类似公地,这会直接影响开源大模型和智能体研发的成本与路径。

arXiv 上的一篇新论文提出 RSI-Dojo,用 281 个可执行训练任务和轨迹数据,把“做后训练”这项能力教给 LLM Agent;基于此微调的 Qwen 模型在 PostTrainBench 上超过各自基座。

arXiv 2026 年 11 月 4 日上线的一篇论文提出 LOLPlay 基准,在《英雄联盟》原生环境中评测实时视觉智能体,覆盖 36 个英雄专属任务。GPT-6 Astra 在摘要报告的评测中取得最高 25.0% 任务成功率,但提高推理强度并未带来收益,暴露出“想得越多、动手越慢”的实时控制难题。

有研究团队用2024年7月至2026年9月发布的20个大模型,重新检验50项被广泛引用的LLM结论,发现截至2026年9月30日,44%已不再成立、34%明显减弱,说明不少关于AI的认知可能只有很短的保质期。

Simon Willison 复现论文示例发现,普通笔记本上运行的开源模型 Qwen 3.8 27B 仅凭数值权重就能判断某个小型强化学习网络训练的是哪款游戏,说明“权重空间编程”这一能力并非只有顶级闭源模型才有。

OpenAI 称其硬件团队借助 GPT-6 Astra,在不到一周的“副项目”时间里完成了一款用于与 Codex 编程智能体对话的硬件设备设计,从外壳到固件均由模型参与。值得关注的是,这既展示了 AI 介入硬件工程流程的速度,也暴露出模型对制造约束理解不足的现实短板。

斯坦福研究者检验50条被广泛引用的LLM结论,发现44%已经失效;对普通用户和开发者而言,过去看到的“大模型不会做X”很可能只是对旧模型的描述。