谷歌 Genie 4 世界模型上新:加音频、实时改场景,仍在研究预览

Google DeepMind 于 10 月 27 日发布世界模型 Genie 4 研究预览,新增匹配场景的实时音频、生成更逼真的世界,并支持在模拟过程中用提示词即时修改场景。它值得关注,因为世界模型正从“能看”走向“能实时操控和试错”。

一句话看懂:Google DeepMind 于 10 月 27 日发布世界模型 Genie 4 研究预览,新增匹配场景的实时音频、生成更逼真的世界,并支持在模拟过程中用提示词即时修改场景。它值得关注,因为世界模型正从“能看”走向“能实时操控和试错”。

事件核心:发生了什么

目前公开信息显示,Genie 4 已向“可信测试者”开放研究预览,后续几周将通过 Project Genie 面向 Google AI Ultra 订阅者,并向 Gemini API 和 Google AI Studio 的早期合作伙伴开放。与此前的 Genie 3 相比,Genie 4 的画面更接近照片级,可维持约两分钟的一致场景,是上一代的两倍;物理表现和角色拟人度也有提升。用户可在模拟中直接输入提示词,改变天气、镜头角度或添加人物和物体。音频方面,模型会生成与场景匹配的音乐、环境声和交互对话。

Google 研究总监 Tejas Kulkarni 在简报中提出“混合世界模型”的思路:Gemini 负责写代码和文本,Genie 实时接收并模拟不同抽象层级的现实。在与 Gemini Robotics 相关的研究实验中,一个 Gemini 4 Argon 模型把任务拆成步骤,由 Genie 4 实时模拟。Google 工程师 Diego Rivas 则表示,实时能力在创意构思和分镜阶段最有价值,可信测试者正在把 Genie 4 用于电影原型制作。

为什么重要

世界模型赛道的竞争正在升温。Runway 几个月前发布了带音频的 GWM Worlds 2;行业也在整合,目前公开信息显示 World Labs 被 AMD 收购、亚马逊在洽谈收购 Decart、Rivian 则收购 Third Dimension 用于自动驾驶仿真。Genie 4 是谷歌在这一拥挤赛道中保持领先的最新动作。它把生成、交互和音频放进同一套模拟里,等于给“在虚拟世界中试错”提供了更完整的基础设施,潜在商业场景包括游戏、互动学习和机器人仿真。

对用户/开发者/创作者的影响

对开发者而言,Genie 4 进入 Gemini API 和 AI Studio 早期合作后,可能成为构建交互式模拟应用的入口,但目前仍是研究预览,实际调用条件尚不明确。对创作者来说,实时改场景意味着快速迭代分镜和概念短片,但 Google 自己也承认短板:模拟时间越长,细节和物体越容易漂移,音频准确性和场景内文字可读性也还没完全解决。想把原型转成成片资产,可能还要依赖 Veo 或尚未就绪的 Gemini Omni。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

一是 Project Genie 向 AI Ultra 订阅者开放后的实际体验和定价;二是 Gemini API 开放后,开发者生态是否随之扩大;三是长时间模拟的画面漂移、音频准确度和文字可读性能否在后续版本中改善。

来源:TechCrunch AI

celebrityanime
celebrityanime
文章: 30441

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注