Kuaishou запустил новый Cinemaster Frameker Framework Text-Video Generation, который обладает 3D-возможностями восприятия и известен как видео-версия ControlNet, предоставляя пользователям беспрецедентную творческую свободу. Это позволяет пользователям точно управлять положением и движением объектов в видео с помощью текстовых подсказок и управляющих сигналов, таких как карты глубины, треки камеры, метки объектов и другие управляющие сигналы, чтобы достичь точного управления генерируемым видеоконтентом. Это отмечает технологию генерации видео ИИ на новый уровень и значительно улучшит эффективность создания видео и возможности творческого выражения.
Основным преимуществом Cinemaster является его сильные возможности контроля. Пользователи могут не только генерировать видео с помощью традиционных текстовых подсказок, но и вносить тонкие настройки на основе контрольных сигналов, таких как карты глубины, треки камеры, этикетки объектов и т. Д., Чтобы создать более креативные и персонализированные работы. Kuaishou также предоставляет набор процессов для извлечения 3D-ограничивающих коробок и треков камеры из крупномасштабных видео, обеспечивающих мощную поддержку данных для обучения и применения Cinemaster. Страница проекта Cinemaster находится в Интернете, и заинтересованные пользователи могут посетить cinemaster-dev.github.io/.
Появление Cinemaster показывает, что область генерации видео с искусственным интеллектом собирается открыть новую волну разработки. Мы с нетерпением ждем будущего Cinemaster, чтобы принести больше сюрпризов и инноваций.