Google 的 Genie 4 世界模型新增音频功能,构建... 笔记

Google 的 Genie 4 世界模型新增音频功能,构建更逼真的世界

Google DeepMind 推出了 Genie 4,这是一款处于研究预览阶段的突破性新世界模型。该先进模型能够生成极具照片真实感且可交互的模拟环境。用户现在只需输入提示词,即可在模拟过程中实时修改场景。Genie 4 还能实时生成上下文恰当的音频,包括音乐和对话。与上一代模型 Genie 3 相比,Genie 4 在照片真实感和交互能力上实现了显著超越。新模型支持自由形式的编辑,例如动态调整天气或相机角度。用户还可以实时向模拟环境中引入新角色或物体。Genie 4 能够将场景一致性维持长达两分钟,较前一版本有显著提升。它具备增强的物理模拟效果以及更逼真的角色表现。Google 预期未来将呈现一种混合形态,即 Gemini 与 Genie 模型协同工作以模拟现实。