soundstorm

Soundstorm: 포괄적인 오디오 및 AI 경험

개요

Soundstorm은 사운드 디자이너, 알고리즘 작곡가 및 실험적인 오디오 애호가에게 풍부하면서도 단순화된 경험을 제공하도록 설계된 최첨단 AI 기반 오디오 조작 응용 프로그램입니다. 샘플 팩 생성 및 알고리즘 구성부터 AI 텍스트-오디오 및 화면 ChatGPT에 이르기까지 Soundstorm은 음향 강국입니다.

특징

• ? AI 텍스트-오디오 생성 : 간단한 텍스트 프롬프트로 원하는 노래나 사운드를 생성합니다.
• ? 알고리즘 샘플 팩 생성 : 사용자가 정의한 기준에 따라 샘플 팩을 자동으로 생성합니다.
• ? 오디오 효과 : 리버브, 왜곡 등과 같은 실시간 오디오 효과.
• ? 알고리즘 구성 : 알고리즘 구성을 생성합니다.
• ? MIDI Randomizer : 창의적인 영감을 위해 무작위 MIDI 시퀀스를 생성합니다.
• ?️ GPT와 채팅 : 실시간 대화 경험을 위해 OpenAI의 GPT 모델을 사용한 통합 채팅입니다.
• ? GPT Randomizer : 임의의 텍스트 조각, 프롬프트 또는 노래 가사를 생성합니다.

설치

전제 조건

• 파이썬 3.11

종속성 설치

저장소를 복제하고 프로젝트 디렉터리로 이동합니다. 다음 명령을 실행하여 필요한 모든 패키지를 설치하십시오.

pip install pedalboard pydub replicate midiutil soundfile openai numpy pygame

API 키

Replicate와 OpenAI 모두에 대한 API 키가 필요합니다.

• 복제의 경우 https://replicate.com에 가입하고 지침에 따라 API 키를 받으세요.
• OpenAI의 경우 https://openai.com/product에 가입하고 지침에 따라 API 키를 받으세요.

애플리케이션을 실행하기 전에 애플리케이션 내의 적절한 섹션에 이러한 키를 추가하세요.

애플리케이션 실행

필수 구성 요소를 설치하고 API 키를 얻은 후 다음을 사용하여 애플리케이션을 실행할 수 있습니다.

python Soundstorm.py

중요한

이것은 매우 거칠다. 현재는 Python 스크립트로만 존재하며 2개의 다른 Mac에서만 테스트되었습니다. 이것은 매우 간단한 GUI를 갖춘 작동하는 프로토타입입니다. 버그가 있을 수 있으며 피네글링이 필요합니다. 또한 물건을 확실히 정리하고 라벨을 더 잘 붙여야 합니다. 이에 대한 도움을 받을 수 있습니다!

기여

기여를 환영합니다! 이것은 아마추어의 작품입니다. 그것이 구체화되는 것을보고 싶습니다!

지원하다

지원 및 기능 요청이 필요하면 이 저장소에서 문제를 열어주세요.

특허

이 프로젝트는 MIT 라이선스에 따라 라이선스가 부여됩니다.