Google 预览 Genie 4 世界模型,可生成带音频的 3D 环境
Google 预览 Genie 4 世界模型,能根据自然语言描述生成逼真的三维环境,并支持用后续提示词修改天气、添加物体等编辑操作。相比前代,Genie 4 更擅长渲染流体运动等复杂细节,还能生成海浪拍击等配套音频,并让虚拟人物动作自然、可实时交互操控。该模型内部调用 Gemini Omni 保证画面真实感、Gemini 3.8 Flash 维持帧间一致性,目前面向少量早期用户测试,后续将通过 Google AI Ultra 订阅、Gemini API 和 Google AI Studio 提供。
模拟场景,并通过输入后续提示词进行编辑。例如,用户可以要求 Genie 4 改变天气或添加更多物体。该模型进行此类编辑时,不会降低虚拟世界的照片级真实感或一致性。 Genie 4 的自然语言界面与键盘控制并存。键盘控制可用于改变摄像机的位置和角度。 在底层,Genie 4 使用 Google 的其他多个模型来提升其输出质量。它依赖这家搜索巨头于 5 月推出的视频生成器 Gemini Omni,以确保其生成的视觉素材逼真。Gemini 3.8 Flash 是一款针对成本效益优化的推理模型,它使模拟的各个帧之间保持一致。 “Gemini 持续观察场景,将目标分解为一系列步骤,并审查传入的帧以跟踪进度并验证每一步是否成功,”Hadsell、Rivas 和 Qi 写道。“当世界发生变化或用户介入时,Gemini 会即时调整其计划。” DeepMind 目前正在研究如何将 Genie 4 应用于机器人用例。该项目将该算法与 Gemini 4 Argon 相结合,后者是 Google 旗舰级的推理优化大语言模型。 该项目的目标是让工程师使用高层指令模拟机器人。例如,用户可以要求 Argon 生成一
匹配字段正文




