技巧

關於

使用生成式 AI 影像到影片 ML 從單一來源影像幻化出擴展影片序列。

您將需要從replicate.com匯出一個API金鑰作為環境變數。

依賴關係

在 Debian Linux 上測試

這需要 ffmpeg

運作需要花錢 *請參閱replica.com 定價

將圖像放入 ./images 資料夾中。 mp4 輸出位於輸出資料夾中。

sudo apt-get install ffmpeg
git clone https://github.com/m-onz/hallucinate
npm i
export REPLICATE_API_TOKEN=r8_BRU **********************************
node hallucinate.js

久等了！

產生初始影像

您可以將任何來源的圖像新增至images資料夾。我用過這個型號

隨著提示：

 shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms

您也可以更新hallucinate.js腳本來設定圖像到影片模型：

 const output = await replicate . run (
  "ali-vilab/i2vgen-xl:5821a338d00033abaaba89080a17eb8783d9a17ed710a6b4246a18e0900ccad4" ,
  {
    input : {
      image : dataURI ,
      prompt : "shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms" ,
      max_frames : 33
    }
  }
) ;