soundstorm

Soundstorm: uma experiência abrangente de áudio e IA

Visão geral

Soundstorm é um aplicativo de manipulação de áudio de última geração com tecnologia de IA, projetado para fornecer uma experiência rica, porém simplificada, para designers de som, compositores algorítmicos e entusiastas de áudio experimental. Desde a criação de pacotes de amostras e composição algorítmica até texto para áudio de IA e ChatGPT na tela, o Soundstorm é uma potência sonora.

Características

• ? Geração de texto para áudio com IA : gere qualquer música ou som desejado com um simples prompt de texto.
• ? Criação algorítmica de pacotes de amostras : gere automaticamente pacotes de amostras com base em critérios definidos pelo usuário.
• ? Efeitos de áudio : efeitos de áudio em tempo real, como reverberação, distorção e muito mais.
• ? Composição Algorítmica : Crie uma composição algorítmica.
• ? MIDI Randomizer : Gere sequências MIDI aleatórias para inspiração criativa.
• ?️ Bate-papo com GPT : bate-papo integrado usando modelos GPT da OpenAI para experiências de conversação em tempo real.
• ? GPT Randomizer : Gere trechos de texto aleatórios, prompts ou até mesmo letras de músicas.

Instalação

Pré-requisitos

• Pitão 3.11

Instalar dependências

Clone o repositório e navegue até o diretório do projeto. Execute o seguinte comando para instalar todos os pacotes necessários:

pip install pedalboard pydub replicate midiutil soundfile openai numpy pygame

Chaves de API

Você precisará ter chaves de API para Replicate e OpenAI:

• Para Replicar, cadastre-se em: https://replicate.com e siga as instruções para obter sua chave API.
• Para OpenAI, inscreva-se em: https://openai.com/product e siga as instruções para obter sua chave API.

Adicione essas chaves nas seções apropriadas do aplicativo antes de executá-lo.

Executando o aplicativo

Depois de instalar os pré-requisitos e obter as chaves de API, você poderá executar o aplicativo usando:

python Soundstorm.py

Importante

Isso é SUPER difícil. Atualmente, ele existe apenas como um script Python e só foi testado em 2 Macs diferentes. É mais ou menos um protótipo funcional com uma GUI super simplificada. Pode ser problemático e requer ajustes. Além disso, as coisas definitivamente precisam ser limpas, rotuladas melhor, etc. Eu preciso de ajuda com isso!

Contribuindo

Contribuições são bem-vindas! Este é o trabalho de um amador. Adoraria ver isso concretizado!

Apoiar

Para solicitações de suporte e recursos, abra um problema neste repositório.

Licença

Este projeto está licenciado sob a licença MIT.