generador de vídeo ia

Generador de historias en vídeo con IA

Este proyecto utiliza Ollama LLM para crear ideas de texto en video basadas en las indicaciones de los usuarios. Toma un mensaje del usuario y genera una historia, que luego se convierte en audio mediante IA. Posteriormente, se generan subtítulos a partir del audio y, finalmente, estos subtítulos se fusionan en un vídeo.

Cómo funciona

1. Entrada de aviso : los usuarios proporcionan un aviso al sistema.
2. Texto a texto : la IA genera una historia basada en el mensaje proporcionado.
3. Texto a voz : la historia se convierte en audio utilizando tecnología de texto a voz con IA.
4. Generación de subtítulos : la IA genera subtítulos a partir del audio.
5. Creación de video : los subtítulos se combinan en un video.

Cómo correr

Requisitos previos

• Docker instalado en su sistema
• Al menos ~5,5 GB de RAM para ejecutar todas las aplicaciones y modelos de película

Instalación

1. Clonar el repositorio:

   git clone https://github.com/ccallazans/ai-video-generator.git
   cd ai-video-generator

2. Inicie los contenedores Docker:

   make start

Una vez que los contenedores estén en funcionamiento, puede acceder al generador de historias en vídeo de IA a través de la interfaz proporcionada o de los puntos finales API. La primera vez puede ser lenta porque tiene que descargar el modelo Ollama y los requisitos de Python Torch, pero las ejecuciones posteriores serán más rápidas porque Docker lo mantiene en caché.

Uso

Envía una solicitud POST con el contenido que deseas que se genere

curl --location ' http://localhost:8080/api/v1/generate ' 
--header ' Content-Type: application/json ' 
--data ' {
    "message": "Tell me a story about Bahia"
} '

Los videos generados se guardan en la carpeta "generada".

Para ejecutar localmente

1. Instale Ollama: Instrucciones en: https://ollama.com/download

2. Cree un entorno Python 3 e instale sus dependencias:

   python3 -m venv venv
   source venv/bin/activate
   pip install -r requirements.txt

3. Ejecute la aplicación Golang:

   go run cmd/ * 

Notas adicionales

• Para agregar más videos de fondo, colóquelos dentro de la carpeta recursos/videos. El video se selecciona aleatoriamente, así que cambie el código si lo desea.
• Asegúrese de que Docker esté configurado y ejecutándose correctamente en su sistema.
• Ajuste las configuraciones necesarias en el archivo Dockerfile o docker-compose.yml según sus requisitos.
• Para uso en producción, asegúrese de que se implementen medidas de seguridad adecuadas y consideraciones de escalabilidad.
• No dudes en cambiar el modelo de ollama. Elija uno de https://ollama.com/library. Estoy usando orca-mini en este proyecto.

¡Siéntete libre de explorar y modificar el proyecto según tus necesidades! Si encuentra algún problema o tiene sugerencias para mejorar, no dude en abrir un problema o enviar una solicitud de extracción.