Редактор Downcodes узнал, что исследователи из Гонконгского университета науки и технологий, Университета науки и технологий Китая и других учреждений разработали модель GameGen-X, которая представляет собой модель диффузионного преобразователя, которая может генерировать и интерактивно управлять игрой с открытым миром. видео. Эта модель может самостоятельно создавать игровые видеоролики с открытым миром, содержащие инновационных персонажей, динамическую среду, сложные действия и разнообразные события, а также поддерживает взаимодействие с пользователем, позволяя пользователям получать удовольствие от планирования игры. Появление GameGen-X открывает новые возможности для разработки игр, а также предоставляет новый метод проектирования и разработки игрового контента.
GameGen-X может самостоятельно создавать игровые видеоролики с открытым миром и имитировать различные функции игрового движка, включая создание инновационных персонажей, динамической среды, сложных действий и разнообразных событий. Он также может взаимодействовать с вами, позволяя вам ощутить острые ощущения от роли игрока. планировщик игр.
На втором этапе, чтобы добиться интерактивного управления, исследователи разработали модуль InstructNet, который объединяет экспертов в мультимодальных управляющих сигналах, связанных с игрой.
InstructNet позволяет моделям адаптировать скрытые представления на основе пользовательского ввода, тем самым впервые объединяя взаимодействие персонажей и управление содержимым сцены при создании видео. В процессе тонкой настройки инструкций обновляется только InstructNet, а предварительно обученная базовая модель замораживается, что позволяет интегрировать в модель интерактивную управляемость без потери разнообразия и качества генерируемого видеоконтента.
Результаты экспериментов показывают, что GameGen-X хорошо справляется с созданием высококачественного игрового контента и обеспечивает превосходный контроль над окружающей средой и персонажами, превосходя другие модели с открытым исходным кодом и коммерческие модели.
Конечно, этот ИИ все еще находится в зачаточном состоянии, и ему еще предстоит пройти долгий путь, прежде чем он сможет по-настоящему заменить планирование игры. Но его появление, несомненно, открывает новые возможности для разработки игр. Он предоставляет новый метод проектирования и разработки игрового контента, демонстрирует потенциал генеративных моделей в качестве вспомогательного инструмента для традиционных технологий рендеринга, эффективно объединяет творческую генерацию и интерактивные функции, а также привносит новые идеи в будущие возможности разработки игр.
Адрес проекта: https://gamegen-x.github.io/
Хотя GameGen-X все еще находится на ранней стадии своего развития, нельзя игнорировать его потенциал в создании игрового контента и интерактивном управлении. В будущем, при постоянном развитии технологий, GameGen-X может стать важным инструментом в области разработки игр и полностью изменить процесс разработки игр. С нетерпением ждем дальнейшего развития и применения GameGen-X!