Der Herausgeber von Downcodes erfuhr, dass Forscher der Hong Kong University of Science and Technology, der University of Science and Technology of China und anderen Institutionen das GameGen-X-Modell entwickelt haben, ein Diffusionstransformatormodell, das Open-World-Spiele generieren und interaktiv steuern kann Videos. Dieses Modell kann unabhängig Open-World-Spielvideos mit innovativen Charakteren, dynamischen Umgebungen, komplexen Aktionen und vielfältigen Ereignissen generieren und unterstützt die Benutzerinteraktion, sodass Benutzer den Spaß an der Spielplanung erleben können. Das Aufkommen von GameGen-X eröffnet neue Möglichkeiten für die Spieleentwicklung und bietet auch eine neue Methode für das Design und die Entwicklung von Spielinhalten.
GameGen-X kann selbst Open-World-Spielvideos generieren und verschiedene Funktionen der Spiel-Engine simulieren, einschließlich der Generierung innovativer Charaktere, dynamischer Umgebungen, komplexer Aktionen und vielfältiger Ereignisse Spielplaner.
Um eine interaktive Steuerbarkeit zu erreichen, entwickelten die Forscher im zweiten Schritt das InstructNet-Modul, das Experten für multimodale Steuersignale im Zusammenhang mit dem Spiel integriert.
InstructNet ermöglicht es Modellen, latente Darstellungen basierend auf Benutzereingaben anzupassen und so die Charakterinteraktion und die Kontrolle des Szeneninhalts erstmals in der Videogenerierung zu vereinheitlichen. Während des Feinabstimmungsprozesses der Anweisungen wird nur InstructNet aktualisiert, während das vorab trainierte Basismodell eingefroren wird, was es dem Modell ermöglicht, interaktive Steuerbarkeit zu integrieren, ohne die Vielfalt und Qualität des generierten Videoinhalts zu verlieren.
Experimentelle Ergebnisse zeigen, dass GameGen-X bei der Generierung hochwertiger Spielinhalte eine gute Leistung erbringt und eine hervorragende Kontrolle über die Umgebung und Charaktere bietet und damit andere Open-Source- und kommerzielle Modelle übertrifft.
Natürlich steckt diese KI noch in den Kinderschuhen und es ist noch ein langer Weg, bis sie die Spielplanung wirklich ersetzen kann. Aber sein Aufkommen bringt zweifellos neue Möglichkeiten für die Spieleentwicklung mit sich. Es bietet eine neue Methode für das Design und die Entwicklung von Spielinhalten, demonstriert das Potenzial generativer Modelle als Hilfswerkzeug für die traditionelle Rendering-Technologie, integriert effektiv kreative Generierung und interaktive Funktionen und bringt neue Ideen für zukünftige Spielentwicklungsmöglichkeiten.
Projektadresse: https://gamegen-x.github.io/
Obwohl sich GameGen-X noch in einem frühen Stadium befindet, kann sein Potenzial bei der Generierung von Spielinhalten und der interaktiven Steuerung nicht ignoriert werden. Mit der kontinuierlichen Weiterentwicklung der Technologie könnte GameGen-X in Zukunft zu einem wichtigen Werkzeug im Bereich der Spieleentwicklung werden und den Spieleentwicklungsprozess völlig verändern. Wir freuen uns auf die zukünftige Entwicklung und Anwendung von GameGen-X!