人為的な

について

生成的な AI 画像からビデオへの ML を使用して、単一のソース画像から拡張されたビデオシーケンスを幻覚させます。

環境変数としてエクスポートされた、replicate.com からの API キーが必要になります。

依存関係

debian Linuxでテスト済み

これにはffmpegが必要です

これには実行にお金がかかります *replicate.com の価格を参照してください

画像を ./images フォルダーに置きます。 mp4 出力は出力フォルダーにあります。

sudo apt-get install ffmpeg
git clone https://github.com/m-onz/hallucinate
npm i
export REPLICATE_API_TOKEN=r8_BRU **********************************
node hallucinate.js

長い間待ってください！

初期イメージの生成

任意のソースから画像をimagesフォルダーに追加できます。このモデルを使用しました

プロンプト:

 shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms

また、 hallucinate.jsスクリプトを更新して、画像からビデオへのモデルを構成することもできます。

 const output = await replicate . run (
  "ali-vilab/i2vgen-xl:5821a338d00033abaaba89080a17eb8783d9a17ed710a6b4246a18e0900ccad4" ,
  {
    input : {
      image : dataURI ,
      prompt : "shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms" ,
      max_frames : 33
    }
  }
) ;