Alibaba открыла исходный код своей новой системы генерации видео с помощью искусственного интеллекта DreaMoving, которая основана на модели диффузии и позволяет обеспечить точный контроль движения персонажей для создания персонализированных видеороликов. Пользователям нужно только предоставить изображения персонажей и простые текстовые описания для создания соответствующих видеороликов, и они могут гибко настраивать такие детали, как движения персонажей, фон и одежду. DreaMoving обеспечивает точный контроль движения и внешнего вида с помощью компонентов Video ControlNet и Content Guider, демонстрируя свои сильные возможности обобщения и прорывной прогресс в области генерации видео с помощью искусственного интеллекта. Это открывает новые возможности для творческого видеопроизводства, создания спецэффектов для кино и телевидения и других областей.
Alibaba анонсировала платформу DreaMoving с открытым исходным кодом, позволяющую добиться идеального контроля над движением персонажей на основе модели диффузии. Платформа позволяет пользователям создавать персонализированные видеоролики с участием людей, включая улыбающуюся девушку на пляже, азиатскую девушку, танцующую в Центральном парке, и многое другое. За счет внедрения компонентов Video ControlNet и Content Guider достигается точный контроль движения и внешнего вида. Пользователям нужно только предоставить портреты и простые подсказки для создания соответствующих видеороликов, а также поддержать изменение подсказок, фона персонажей и одежды. DreaMoving продемонстрировала сильные возможности обобщения в области создания видео с помощью искусственного интеллекта и может создавать высококачественные видеоролики на основе управляемых последовательностей и простых описаний.
Открытый исходный код платформы DreaMoving знаменует собой новый этап в развитии технологии создания видео с использованием искусственного интеллекта. Его мощные функции и простота использования принесут удобство большему числу разработчиков и пользователей, а также будут способствовать применению и развитию технологии создания видео с помощью искусственного интеллекта в различных областях. с нетерпением ждем его последующих обновлений и улучшений.