O editor do Downcodes soube que pesquisadores da Universidade de Ciência e Tecnologia de Hong Kong, da Universidade de Ciência e Tecnologia da China e de outras instituições desenvolveram o modelo GameGen-X, que é um modelo de transformador de difusão que pode gerar e controlar interativamente jogos de mundo aberto vídeos. Este modelo pode gerar de forma independente vídeos de jogos de mundo aberto contendo personagens inovadores, ambientes dinâmicos, ações complexas e eventos diversos, e oferece suporte à interação do usuário, permitindo que os usuários experimentem a diversão do planejamento do jogo. O surgimento da GameGen-X traz novas possibilidades para o desenvolvimento de jogos e também fornece um novo método para design e desenvolvimento de conteúdo de jogos.
GameGen-X pode gerar vídeos de jogos de mundo aberto por si só e pode simular diversas funções do motor de jogo, incluindo a geração de personagens inovadores, ambientes dinâmicos, ações complexas e eventos diversos. planejador de jogo.
Na segunda etapa, para alcançar a controlabilidade interativa, os pesquisadores desenvolveram o módulo InstructNet, que integra especialistas em sinais de controle multimodais relacionados ao jogo.
O InstructNet permite que os modelos adaptem representações latentes com base na entrada do usuário, unificando assim pela primeira vez a interação dos personagens e o controle do conteúdo da cena na geração de vídeo. Durante o processo de ajuste fino das instruções, apenas o InstructNet é atualizado, enquanto o modelo base pré-treinado é congelado, o que permite ao modelo integrar a controlabilidade interativa sem perder a diversidade e a qualidade do conteúdo de vídeo gerado.
Resultados experimentais mostram que o GameGen-X tem um bom desempenho na geração de conteúdo de jogos de alta qualidade e oferece excelente controle sobre o ambiente e os personagens, superando outros modelos comerciais e de código aberto.
É claro que esta IA ainda está em sua infância e ainda há um longo caminho a percorrer antes que possa realmente substituir o planejamento do jogo. Mas o seu surgimento sem dúvida traz novas possibilidades para o desenvolvimento de jogos. Ele fornece um novo método para design e desenvolvimento de conteúdo de jogos, demonstra o potencial dos modelos generativos como uma ferramenta auxiliar para a tecnologia de renderização tradicional, integra efetivamente a geração criativa e funções interativas e traz novas ideias para futuras possibilidades de desenvolvimento de jogos.
Endereço do projeto: https://gamegen-x.github.io/
Embora a GameGen-X ainda esteja em seus estágios iniciais, seu potencial na geração de conteúdo de jogos e no controle interativo não pode ser ignorado. No futuro, com o desenvolvimento contínuo da tecnologia, o GameGen-X pode se tornar uma ferramenta importante na área de desenvolvimento de jogos e mudar completamente o processo de desenvolvimento de jogos. Ansioso pelo futuro desenvolvimento e aplicação do GameGen-X!