Google недавно выпустила свою новейшую модель генерации видео VideoPoet, которая может генерировать видеоролики длиной до 10 секунд и автоматически генерировать соответствующие звуковые эффекты саундтрека. В отличие от предыдущих моделей распространения, VideoPoet использует большую языковую модель, которая позволяет интегрировать несколько функций, таких как преобразование текста в видео, восстановление видео и стилизация видео, что значительно повышает гибкость и эффективность использования. Его уникальный механизм расширения видео создает иллюзию бесконечного расширения видео, многократно предсказывая содержимое следующего кадра последнего кадра, предоставляя пользователям новый опыт создания видео.
19 декабря Google выпустила модель генерации видео VideoPoet. Эта модель может генерировать видеоролики длиной до 10 секунд, а также автоматически генерировать звуковые эффекты саундтрека на основе видеоконтента. VideoPoet расширяет видео, многократно предсказывая содержимое следующего кадра последнего кадра видео, создавая у пользователя ощущение, что видео можно расширять бесконечно. В отличие от других моделей, VideoPoet использует большую языковую модель вместо диффузной модели, поэтому он объединяет несколько функций, таких как преобразование текста в видео, восстановление видео и стилизация видео, в одну и ту же модель, что делает ее более гибкой в использовании.
Появление VideoPoet знаменует собой значительный прогресс в технологии создания видео. Ожидается, что его мощные функции и удобные методы работы будут широко использоваться в различных областях в будущем, предоставляя пользователям более богатый и удобный опыт создания видео. Мы с нетерпением ждем, когда VideoPoet принесет еще больше удивительных функций и приложений в будущем.