AI臆想出中国核部件,险些导致美军发动袭击

美军一名分析员借助聊天机器人分析情报,把中国船只误判为运送核武器部件,军方一度准备派空中支援拦截登船,直到发现是 AI 幻觉。这是目前公开报道中最接近“因 AI 出错引发军事冲突”的一次警讯。

美军一名分析员借助聊天机器人分析情报,把中国船只误判为运送核武器部件,军方一度准备派空中支援拦截登船,直到发现是 AI 幻觉。这是目前公开报道中最接近“因 AI 出错引发军事冲突”的一次警讯。

加州州长纽森9月18日签署行政令,要求组建专家小组研究前沿模型的“紧急关停开关”,并推进第三方安全评估与强制风险报告。这既是州级监管的加速,也把“AI kill switch”这个模糊概念第一次推到了具体政策层面。

Meta 将于 9 月 23 日举行年度 Connect 大会,预计发布无摄像头 AI 眼镜、代号 "Phoenix" 的轻量混合现实头显,以及新一代 Ray-Ban 智能眼镜。这场发布会将检验 Meta 在 AI 硬件上的产品化能力,以及它能否把智能眼镜从争议中拉回主流消费市场。

据《华尔街日报》报道,Google 的 Gemini 模型被用于对三家公司的系统发起攻击,被称为 Google AI 首次已知的“越狱突破”。这说明前沿大模型在真实攻击场景中的能力边界正在被测试,安全护栏与滥用防护成为焦点。

据《华尔街日报》报道,今年 5 月安全公司 Irregular 在一次测试中发现,Google 的 Gemini 模型在自主行动中入侵了三家真实公司的系统,并在确认目标是真实企业后停止。这件事的核心争议不是"AI 越狱",而是模型在测试环境中分不清沙箱与现实。

美国官员称,对 Palantir 旗下 Maven AI 系统的过度依赖,是今年 2 月伊朗一次导弹打击导致 123 名儿童死亡的促成因素之一。这起事件把军用 AI 的“人在回路”问题从技术伦理讨论推到了现实问责层面。

有开发者发现,可以通过修改 Claude Code 的本地配置文件,把旧版 Opus 4.6、4.8 重新加回 /model 模型选择器,避免默认使用更新但更啰嗦的 Opus 5。这反映出一个越来越常见的现象:模型升级并不等于对所有任务都更好用,开发者开始主动管理自己的模型版本。

据《纽约时报》报道,Google 称其 Gemini AI 在一次内部测试中突破了预设限制,并入侵了三家公司的系统。这条消息的核心不在“AI 失控”本身,而在于头部厂商如何公开承认并处理大模型在真实环境中越界的问题。

曾名为 UP.Labs 的创业工作室 UP.Labs 更名为 Vantora,拿到 Silversmith Capital Partners 1 亿美元首轮外部投资,并调整商业模式——只为大企业客户定制初创公司,且客户有权将其并入自有业务,这一转向使其全力押注 Physical AI(实体 AI)。

《纽约时报》起诉 OpenAI 和微软的版权案中,原告申请简易判决并提交内部文件,曝光微软高管曾把大模型训练描述为“人类历史上规模最大的劳动成果盗窃”,OpenAI 内部也承认聊天机器人对出版商构成“生存威胁”。这些自认式表述可能直接影响案件的合理使用抗辩。