SciΠvot基准发布:前沿大模型在科研纠错判断中多数低于随机

Hugging Face Papers 于 2026 年 10 月 15 日收录的论文摘要显示,新基准 SciΠvot 用 248 个真实科研干预案例测试大模型能否做出正确的科学判断,结果多数前沿模型在关键决策上表现不及随机选择,值得关注的是这暴露了自主科研智能体的判断短板。

Hugging Face Papers 于 2026 年 10 月 15 日收录的论文摘要显示,新基准 SciΠvot 用 248 个真实科研干预案例测试大模型能否做出正确的科学判断,结果多数前沿模型在关键决策上表现不及随机选择,值得关注的是这暴露了自主科研智能体的判断短板。

Hugging Face Papers收录的论文提出OfficeTown,一个从自然语言描述生成“职业组织”的仿真框架,用持续积累的工作上下文评测和训练AI代理,并同步发布了含406个任务、4836条标准的OfficeTown Bench。

Hugging Face Papers 收录的论文提出 LeanPRM,借助 Lean 证明助手为自然语言数学证明自动生成步骤级标签,在没有人工标注的情况下训练步骤验证器,在多个基准上优于用 PRM800K 训练的同类模型。

Hugging Face Papers 收录的一篇论文提出 Speculative Sampling 策略,试图在交互式视频生成中同时保留大双向窗口的画质优势和小分块的低延迟,把窗口大小从约束变成可调参数。

研究者提出投机解码方法 ReaDy,利用混合线性注意力模型的循环状态为每个草稿位置检索补充上下文。论文摘要称,在 Qwen3.8-27B 上单卡 B200 平均取得约 3.16 倍解码加速。

Hugging Face Papers 收录的论文提出 OS-Helix,把图形界面点击操作与代码执行整合进同一动作空间,用混合数据训练原生桌面智能体。在 OSWorld-Verified 上,OS-Helix-27B-RL 报告 66.44% 的成功率,为 GUI 智能体如何真正落地提供了一种新思路。

Hugging Face Papers 收录的论文 Gen4P 提出,把预训练视频生成器改造成前馈式 4D 感知器,无需迭代去噪即可从单目视频恢复几何与运动。它指向的方向是:视频生成模型的底座能力,可能被复用到三维感知任务上。

Hugging Face Papers 收录的论文摘要提出 PhysClosureBench 基准,用 50 个专家核验的物理研究任务考察 AI 智能体能否把研究推进到有证据支撑的完整结论。值得注意的是,局部表现最好的 Claude-Opus-5 平均 Atomic Score 为 6.29/10,但完全闭环…

在启用 --metrics 的 llama-server 上,当 VictoriaMetrics 每秒抓取 /metrics 且一次请求的提示词处理时间足够长(约超过 20 秒)时,服务端可能静默停止生成,即出现 Eval bug: server silently stops processing

在 GLM-5.3-Flash + mmproj 的多模态推理场景下启用 --spec-type draft-mtp (GLM5Next MTP 投机解码)时,所有带图片的请求都会返回 HTTP 500,日志报出 “failed to process speculative batch”,原因是投机