人工智能视频生成器

AI视频故事生成器

该项目利用 Ollama LLM 根据用户提示创建视频文本创意。它根据用户的提示生成一个故事，然后使用人工智能将其转换为音频。随后，从音频生成字幕，最后将这些字幕合并到视频中。

它是如何运作的

1. 提示输入：用户向系统提供提示。
2. 文本到文本：人工智能根据提供的提示生成故事。
3. 文本转语音：使用AI文本转语音技术将故事转换为音频。
4. 字幕生成：人工智能从音频生成字幕。
5. 视频创建：将字幕合并到视频中。

如何跑步

先决条件

• Docker 安装在您的系统上
• 至少 ~5.5GB RAM 来运行所有应用程序和 llm 模型

安装

1. 克隆存储库：

   git clone https://github.com/ccallazans/ai-video-generator.git
   cd ai-video-generator

2. 启动 Docker 容器：

   make start

容器启动并运行后，您可以通过其提供的接口或 API 端点访问 AI 视频故事生成器。第一次可能会很慢，因为它必须下载 Ollama 模型和 Python Torch 要求，但后续运行会更快，因为 Docker 将其保存在缓存中。

用法

发送 POST 请求，其中包含要生成的内容

curl --location ' http://localhost:8080/api/v1/generate ' 
--header ' Content-Type: application/json ' 
--data ' {
    "message": "Tell me a story about Bahia"
} '

生成的视频保存在“生成”文件夹中。

在本地运行

1. 安装 Ollama：说明：https://ollama.com/download

2. 创建Python 3环境并安装其依赖项：

   python3 -m venv venv
   source venv/bin/activate
   pip install -r requirements.txt

3. 运行 Golang 应用程序：

   go run cmd/ * 

附加说明

• 要添加更多背景视频，请将其放入 resources/videos 文件夹中。该视频是随机选择的，因此如果需要，请更改代码。
• 确保 Docker 已正确配置并在您的系统上运行。
• 根据您的要求调整 Dockerfile 或 docker-compose.yml 文件中的任何必要配置。
• 对于生产使用，请确保实施适当的安全措施和可扩展性注意事项。
• 随意更改 ollama 模型。从 https://ollama.com/library 选择一项。我在这个项目中使用 orca-mini

请随意根据您的需求探索和修改项目！如果您遇到任何问题或有改进建议，请随时提出问题或提交拉取请求。