技巧

关于

使用生成式 AI 图像到视频 ML 从单个源图像中幻化出扩展视频序列。

您将需要从replicate.com导出一个API密钥作为环境变量。

依赖关系

在 Debian Linux 上测试

这需要 ffmpeg

运行需要花钱 *参见replica.com 定价

将图像放入 ./images 文件夹中。 mp4 输出位于输出文件夹中。

sudo apt-get install ffmpeg
git clone https://github.com/m-onz/hallucinate
npm i
export REPLICATE_API_TOKEN=r8_BRU **********************************
node hallucinate.js

久等了！

生成初始图像

您可以将任何来源的图像添加到images文件夹中。我用过这个型号

随着提示：

 shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms

您还可以更新hallucinate.js脚本来配置图像到视频模型：

 const output = await replicate . run (
  "ali-vilab/i2vgen-xl:5821a338d00033abaaba89080a17eb8783d9a17ed710a6b4246a18e0900ccad4" ,
  {
    input : {
      image : dataURI ,
      prompt : "shocking abstract 3D art in the style of andy warhol and francis bacon for a gallery that shocks the viewer exploring digital, glitch and modern culture, distorted abstract wireframe mesh forms" ,
      max_frames : 33
    }
  }
) ;