人工智慧視訊產生器

AI影片故事生成器

該專案利用 Ollama LLM 根據用戶提示創建視訊文字創意。它根據用戶的提示生成一個故事，然後使用人工智慧將其轉換為音訊。隨後，從音訊產生字幕，最後將這些字幕合併到影片中。

它是如何運作的

1. 提示輸入：使用者向系統提供提示。
2. 文字到文字：人工智慧根據提供的提示產生故事。
3. 文字轉語音：使用AI文字轉語音技術將故事轉換為音訊。
4. 字幕生成：人工智慧從音訊產生字幕。
5. 影片建立：將字幕合併到影片中。

如何跑步

先決條件

• Docker 安裝在您的系統上
• 至少 ~5.5GB RAM 來運行所有應用程式和 llm 模型

安裝

1. 克隆儲存庫：

   git clone https://github.com/ccallazans/ai-video-generator.git
   cd ai-video-generator

2. 啟動 Docker 容器：

   make start

容器啟動並運行後，您可以透過其提供的介面或 API 端點存取 AI 視訊故事產生器。第一次可能會很慢，因為它必須下載 Ollama 模型和 Python Torch 要求，但後續運行會更快，因為 Docker 將其保存在快取中。

用法

發送 POST 請求，其中包含要產生的內容

curl --location ' http://localhost:8080/api/v1/generate ' 
--header ' Content-Type: application/json ' 
--data ' {
    "message": "Tell me a story about Bahia"
} '

生成的影片保存在「生成」資料夾中。

在本地運行

1. 安裝 Ollama：說明：https://ollama.com/download

2. 建立Python 3環境並安裝其相依性：

   python3 -m venv venv
   source venv/bin/activate
   pip install -r requirements.txt

3. 運行 Golang 應用程式：

   go run cmd/ * 

附加說明

• 要添加更多背景視頻，請將其放入 resources/videos 資料夾中。該影片是隨機選擇的，因此如果需要，請更改代碼。
• 確保 Docker 已正確配置並在您的系統上運作。
• 根據您的要求調整 Dockerfile 或 docker-compose.yml 檔案中的任何必要配置。
• 對於生產使用，請確保實施適當的安全措施和可擴展性注意事項。
• 隨意更改 ollama 模型。從 https://ollama.com/library 選擇一項。我在這個專案中使用 orca-mini

請隨意根據您的需求探索和修改項目！如果您遇到任何問題或有改進建議，請隨時提出問題或提交拉取請求。