谷歌研究人员基于 Stable Diffusion1.4 开发了实时游戏模拟引擎 GameNGen，它能以超过 20 帧每秒的速度交互式模拟《DOOM》，人类难以分辨其与真实游戏。GameNGen 不只是复制视觉效果，还能维持复杂内部状态更新，增强模拟真实性。它主要由训练智能体生成动作和观察数据以及调整 Stable Diffusion v1.4 训练生成模型两部分组成，还引入“噪声增强”技术解决自回归生成难题。虽然有技术局限，但在游戏开发领域如关卡设计、测试和实时场景交互等有很大帮助，可自动生成场景并提供个性化游戏体验。
论文地址：
https://arxiv.org/abs/2408.14837
GitHub地址：
https://gamengen.github.io/