Downcodes小编获悉,香港科技大学、中国科学技术大学等机构的研究人员研发出GameGen-X模型,这是一个能够生成和互动控制开放世界游戏视频的扩散变换器模型。该模型能够自主生成包含创新角色、动态环境、复杂动作和多样化事件的开放世界游戏视频,并支持用户互动,让用户体验游戏策划的乐趣。GameGen-X的出现为游戏开发带来了新的可能性,也为游戏内容设计和开发提供了一种全新的方法。
GameGen-X能自己生成开放世界游戏视频,可以模拟各种游戏引擎功能,包括生成创新角色、动态环境、复杂动作和多样化事件,还能跟你互动,让你体验一把当游戏策划的快感。
在第二阶段,为了实现互动可控性,研究人员设计了 InstructNet 模块,该模块集成了与游戏相关的多模态控制信号专家。
InstructNet 允许模型根据用户输入调整潜在表示,从而首次在视频生成中统一了角色互动和场景内容控制。在指令微调过程中,只有 InstructNet 被更新,而预训练的基础模型被冻结,这使得模型能够在不损失生成视频内容多样性和质量的情况下集成互动可控性。
实验结果表明,GameGen-X 在生成高质量游戏内容方面表现出色,并提供了对环境和角色的出色控制能力,优于其他开源和商业模型。
当然,这 AI 现在还只是个 初级阶段,离真正取代游戏策划还有很长的路要走。但它的出现,无疑给游戏开发带来了新的可能性。它为游戏内容设计和开发提供了一种新的方法,展示了生成模型作为传统渲染技术的辅助工具的潜力,有效地将创意生成与互动功能融合在一起,为未来的游戏开发带来了新的可能性。
项目地址:https://gamegen-x.github.io/
GameGen-X虽然目前仍处于早期阶段,但其在游戏内容生成和互动控制方面的潜力不容忽视。未来,随着技术的不断发展,GameGen-X或许将成为游戏开发领域的一项重要工具,彻底改变游戏开发流程。期待GameGen-X未来的发展和应用!