El editor de Downcodes se enteró de que investigadores de la Universidad de Ciencia y Tecnología de Hong Kong, la Universidad de Ciencia y Tecnología de China y otras instituciones han desarrollado el modelo GameGen-X, que es un modelo de transformador de difusión que puede generar y controlar de forma interactiva un juego de mundo abierto. vídeos. Este modelo puede generar de forma independiente videos de juegos de mundo abierto que contienen personajes innovadores, entornos dinámicos, acciones complejas y eventos diversos, y admite la interacción del usuario, permitiéndoles experimentar la diversión de planificar juegos. La aparición de GameGen-X aporta nuevas posibilidades al desarrollo de juegos y también proporciona un nuevo método para el diseño y desarrollo de contenidos de juegos.
GameGen-X puede generar videos de juegos de mundo abierto por sí mismo y puede simular varias funciones del motor del juego, incluida la generación de personajes innovadores, entornos dinámicos, acciones complejas y eventos diversos. También puede interactuar contigo, permitiéndote experimentar la emoción de ser un. planificador de juegos.
En la segunda etapa, para lograr controlabilidad interactiva, los investigadores diseñaron el módulo InstructNet, que integra expertos en señales de control multimodal relacionadas con el juego.
InstructNet permite que los modelos adapten representaciones latentes basadas en la entrada del usuario, unificando así la interacción de los personajes y el control del contenido de la escena en la generación de video por primera vez. Durante el proceso de ajuste de instrucciones, solo se actualiza InstructNet, mientras que el modelo base previamente entrenado se congela, lo que permite que el modelo integre la controlabilidad interactiva sin perder la diversidad y la calidad del contenido de video generado.
Los resultados experimentales muestran que GameGen-X funciona bien en la generación de contenido de juegos de alta calidad y proporciona un excelente control sobre el entorno y los personajes, superando a otros modelos comerciales y de código abierto.
Por supuesto, esta IA todavía está en su infancia y todavía queda un largo camino por recorrer antes de que realmente pueda reemplazar la planificación del juego. Pero su aparición, sin duda, trae nuevas posibilidades al desarrollo de juegos. Proporciona un nuevo método para el diseño y desarrollo de contenido de juegos, demuestra el potencial de los modelos generativos como herramienta auxiliar para la tecnología de renderizado tradicional, integra de manera efectiva la generación creativa y las funciones interactivas y aporta nuevas ideas para el desarrollo futuro de juegos.
Dirección del proyecto: https://gamegen-x.github.io/
Aunque GameGen-X aún se encuentra en sus primeras etapas, no se puede ignorar su potencial en la generación de contenido de juegos y control interactivo. En el futuro, con el desarrollo continuo de la tecnología, GameGen-X puede convertirse en una herramienta importante en el campo del desarrollo de juegos y cambiar completamente el proceso de desarrollo de juegos. ¡Esperamos con ansias el futuro desarrollo y aplicación de GameGen-X!