谷歌发布Genie 4世界模型支持实时交互

谷歌发布Genie 4世界模型支持实时交互

  当地时间10月27日,谷歌旗下DeepMind正式发布新一代通用世界模型Genie 4的研究预览版,官方将其定义为迄今为止最逼真、最具互动性的AI世界模型。目前该模型仅面向受信任的测试人员开放,后续将逐步扩大开放范围,覆盖Google AI Ultra订阅用户以及Gemini API、AI Studio的早期合作伙伴。

  作为谷歌在世界模拟领域的最新研究成果,Genie 4的推出标志着AI世界模型技术实现了阶段性突破,将传统的静态视频生成模式升级为可实时交互的动态模拟体系,为多领域的应用落地打开了全新的想象空间。

核心技术架构与交互特性

  Genie 4原生具备多模态能力,首次实现了音视频内容的同步生成,可在构建虚拟世界画面的同时,动态输出背景音乐、环境音效以及交互式对话,打破了过往AI生成内容中音频与画面分离制作的常规模式。该模型深度融合了Gemini系列模型的能力,其中Gemini Omni负责锚定模拟场景在真实世界中的外观与行为逻辑,其余Gemini模型则承担复杂推理工作,保障长程场景的连贯性与逻辑自洽,让模拟出的虚拟世界能够高度贴合真实物理规则,呈现出符合现实逻辑的物体形态与运动轨迹变化。

  不同于传统视频AI工具只能一次性生成完整内容、生成过程中无法中途修改的局限,Genie 4支持用户在模拟运行的过程中,通过自然语言输入实时调整场景参数,既可以改变天气状况、调整镜头角度,也能向现有场景中引入新的物体或角色,而场景中原有的角色与环境元素会对这些即时变化做出符合逻辑的即时反应,相当于赋予了使用者实时导演虚拟世界的能力。用户可以任意设定初始事件,随后观察整个虚拟世界的后续演化过程,还能随时介入调整内容,整个交互过程流畅自然,大幅降低了虚拟内容创作的门槛。

  在模拟时长方面,Genie 4的最长连贯模拟时长达到2分钟,是前代产品Genie 3的两倍,能够支撑更长时间的连续虚拟场景运行,为各类应用场景提供了更充足的内容承载空间。同时该模型还集成了SynthID数字水印技术,对所有生成的视频与音频内容进行标识,便于后续对AI生成内容进行溯源与管理。

当前落地场景与产业价值

  尽管Genie 4已经具备生成高拟真虚拟世界的能力,但受限于高昂的构建成本、庞大的算力需求,以及目前仅约2分钟的连贯模拟时长,该模型短期内还无法支撑规则严格的大型虚拟世界游戏开发,也不能直接作为高精度物理仿真工具投入使用。不过在多个垂直产业领域,该模型已经展现出明确的落地价值,影视制作、新闻教育及工程产业将成为率先受益的领域,相关从业者可以利用其生成过程可实时约束的特性,快速完成创意方案展示与产品原型探索,大幅缩短前期内容筹备的周期。

  在具身智能训练领域,可实时交互的世界模型具备极高的应用价值。Genie 4能够根据使用者的指令,动态生成大量完全不同的开放场景,以及带有声音反馈的移动物体,无需搭建真实物理场景就可以低成本完成多模态具身智能的视觉与听觉协同能力训练,大幅降低智能体训练的硬件投入成本。除此之外,该模型还可以为自动驾驶智驾系统制造各类突发交通场景,用于测试智能驾驶系统的应急应变能力,填补部分极端场景实车测试难以覆盖的空白。

  据澎湃新闻报道,谷歌正探索该模型在游戏设计、影视制作、教育、机器人训练等领域的应用,参与测试的人员也指出,其在影视原型制作环节能够发挥显著作用,帮助创作团队快速将抽象的创意转化为可视化的动态演示内容,提升前期创意沟通的效率。

现存挑战与行业发展态势

  作为仍处于研究预览阶段的技术产品,Genie 4目前仍面临三大核心挑战有待解决。第一是面向普通用户全面开放的具体时间与定价方案尚未明确,普通消费者暂时无法直接体验相关功能;第二是模型的长程场景一致性仍需持续提升,长时间运行模拟过程中可能出现细节漂移的问题,音频准确性和画面内文字可读性也尚未完全解决;第三是在具身智能训练领域,生成内容到实际真机部署的训练迁移闭环能否顺利跑通,仍有待后续进一步验证,当前阶段该模型的运行依然离不开真机数据的配合支撑。

  谷歌研究总监Tejas Kulkarni表示,未来将越来越多地看到这种混合世界模型架构,由Gemini系列模型负责完成文本、代码与任务规划工作,Genie 4则实时将这些规划内容转化为可交互的动态世界,二者协同形成完整的技术体系。

  当前全球世界模型赛道正处于加速进化的阶段,除了谷歌推出的Genie系列产品之外,Runway、京东、阿里等多家企业也已经推出了具备相似实时交互能力的世界模型产品,整个行业的技术竞争与商业化探索才刚刚起步。国联民生证券指出,大模型已从年更、月更进入近乎周更的快节奏迭代,智能体正从简单问答向多任务协同演进,AGI时代正在到来。世界模型作为AI基础设施的重要演进方向,其技术突破将持续拉动算力需求,为算力产业链带来增量空间。

(编辑:吴淑娟)