Недавно Goku, модель мобильного генерации видео, разработанная Университетом Гонконга и Байеданса, была официально выпущена. Эта модель использует алгоритмы расширенного поколения для генерации высококачественного видеоконтента на основе текстовых подсказок, что значительно обогащает выражение цифрового искусства.
Чтобы продемонстрировать силу модели Гоку, исследовательская группа создала серию замечательных примеров видео, которые не только демонстрируют технические возможности модели, но и демонстрируют его неограниченный потенциал в творческой производительности.
Модель Goku характеризуется эффективной скоростью генерации и качеством изображения. Используя большое количество обучения данных, Гоку может генерировать различные сцены, включая анимацию, естественные пейзажи, поведение животных и т. Д. Исследователи использовали оригинальную подсказку MovieGenbench для тестирования, обеспечивая последовательность и справедливость демонстрационного эффекта.
Например, на одном из видео показывает модную женщину, которая уверенно ходила по улицам Токио, с красочными неоновыми огнями, отражающими теплую ночь, а пешеходы сумасшедшие со сценами яркие и реалистичные.
В другом видео показывается несколько гигантских мамонтов, ходящих неторохотно по снегу, с окружающими снежными горами и лесами, заставляющими людей чувствовать, как будто они находятся в мире льда и снега. Эти яркие сцены не только привлекают внимание аудитории, но и дают богатое вдохновение для художественных создателей.
Что еще более удивительно, так это то, что Гоку также поддерживает прямое поколение виртуальных цифровых человеческих видеороликов. Goku+ превращает текст в сюрреалистические человеческие видео, что значительно лучше, чем существующие методы. В частности, он может генерировать видео в течение 20 секунд, включающих стабильные движения рук и весьма выразительные движения лица и тела людей.
Кроме того, он поддерживает такие функции, как генерирование интерактивных видео из изображений продуктов, поддержание стилей продуктов и создание видеороликов продукта, а также создание рекламных видео из текста.
Как показано ниже: Goku+ преобразует изображения продуктов в привлекательные видеоклипы для обеспечения сквозной оптимизации. Этот процесс повышает привлекательность и эффективность ваших маркетинговых материалов.
Как показано ниже: Создайте реалистичные и привлекательные видео, которые демонстрируют конкретные продукты. Эти видео эффективно отражают суть продукта и увеличивают вовлечение аудитории и интерес.
Кроме того, модель поддерживает создание текста индивидуальных видеороликов высокой четкости для оптимизации сценариев рекламы, что значительно лучше, чем основные видео-модели конкурентов.
Вход в проект: https://saiyan-world.github.io/goku/