выдумка

о

использование генеративного искусственного интеллекта для преобразования изображений в видео для создания расширенных видеопоследовательностей из одного исходного изображения.

вам понадобится ключ API от replication.com, экспортированный как переменная среды.

зависимости

проверено на Debian Linux

для этого требуется ffmpeg

это стоит денег * см. цены на replication.com

поместите изображения в папку ./images. Выходные данные mp4 находятся в выходной папке.

sudo apt-get install ffmpeg
git clone https://github.com/m-onz/hallucinate
npm i
export REPLICATE_API_TOKEN=r8_BRU **********************************
node hallucinate.js

ждать долго!

создание исходных изображений

Вы можете добавлять изображения в папку images из любого источника. Я использовал эту модель

С подсказкой:

 shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms

Вы также можете обновить скрипт hallucinate.js , чтобы настроить модель преобразования изображения в видео:

 const output = await replicate . run (
  "ali-vilab/i2vgen-xl:5821a338d00033abaaba89080a17eb8783d9a17ed710a6b4246a18e0900ccad4" ,
  {
    input : {
      image : dataURI ,
      prompt : "shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms" ,
      max_frames : 33
    }
  }
) ;