Исследовательские группы из Гонконгского университета науки и технологий и Университета Цинхуа совместно запустили Amazing Ai -Framework DimensionX, который может генерировать подробные 3D и 4D -сцены с одним изображением. Эта прорывная технология использует контролируемую технологию диффузии видео для извлечения пространственной и временной информации из одной картины и преобразования ее в непрерывные видео кадры, что в конечном итоге объединяется в полные сцены 3D или 4D для разработки игр, виртуальной реальности и поля кино и телевидения принесли революционные изменения. DimensionX оснащен двумя мощными инструментами, S-директором и T-директором, которые контролируют перспективу сцены и перемещение объектов соответственно, достигать точного контроля сцены и даже могут использоваться в комбинации для создания более сложных и реалистичных сцены.
Исследовательские команды из Гонконгского университета науки и технологий и Университета Цингхуа запустили новую структуру ИИ под названием DimensionX, которая может генерировать подробные 3D и 4D -сцены с одним изображением, внедряя поля разработки игр, виртуальной реальности и кино и телевидения. Производство приходит на революционный прорыв!
Основная магия DimensionX - это управляемая технология диффузии видео. Это как опытный «космический маг», который может извлечь пространственную и временную информацию из одной картины и преобразовать ее в непрерывные видео кадры.
Эти видео кадры похожи на кинофильм, записывая различные углы и динамические изменения сцены и, наконец, объединяют их в полную 3D или 4D -сцену.
Чтобы точно управлять «космической магией», DimensionX также оснащен двумя мощными «волшебными палочками»: S-Director и T-Director. S-Директор отвечает за пространственное измерение и может контролировать движение перспективы, точно так же, как вы свободно пройдите через сцену со своей камерой.
T-Director отвечает за размерное время, которое может контролировать движение объектов и сделать сцену «живой».
Что еще более удивительно, так это то, что DimensionX также может объединить эти две «волшебные палочки», чтобы генерировать более сложные и реалистичные сцены!
Например, вы можете заставить угол просмотра вращаться вокруг объекта, пока объект движется, как вы находитесь в реальном 4D мира!
Конечно, «магия» DimensionX - это больше, чем это. Он также оптимизирован для реальных сцен, таких как проектирование механизма восприятия траектории, который может обрабатывать различные сложные движения камеры, что делает сгенерированные трехмерные сцены более реалистичными и заслуживающими доверия.
Кроме того, DimensionX также внедрила стратегию денирования идентификации, которая может обеспечить последовательность появления объектов в 4D сценах и избежать смущающей ситуации «разбитости».
Появление DimensionX, несомненно, принесло революционные прорывы в поля генерации 3D и 4D. Он не только имеет простую работу и удивительные эффекты, но также имеет широкий спектр приложений и может использоваться во многих областях, таких как разработка игры, виртуальная реальность, кино и телевизионное производство. Я считаю, что в ближайшем будущем DimensionX приведет нас в более захватывающий мир «космической магии»!
Адрес проекта: https://chenshuo20.github.io/dimensionx/
Бумажный адрес: https://arxiv.org/pdf/2411.04928
Благодаря своей простой операции, удивительным эффектам и обширным перспективам применения, DimensionX принесла революционные прорывы на поле 3D и 4D -сцены.