soundstorm

Soundstorm: комплексный опыт работы со звуком и искусственным интеллектом

Обзор

Soundstorm — это передовое приложение для обработки звука на базе искусственного интеллекта, созданное для предоставления богатых, но упрощенных возможностей для звукорежиссеров, алгоритмических композиторов и любителей экспериментального звука. Soundstorm — это мощный звуковой центр, от создания пакетов семплов и алгоритмической композиции до преобразования текста в аудио с помощью искусственного интеллекта и экранного ChatGPT.

Функции

• ? Генерация текста в аудио с помощью AI : создавайте любую песню или звук по вашему желанию с помощью простой текстовой подсказки.
• ? Алгоритмическое создание пакетов образцов : автоматическое создание пакетов образцов на основе заданных пользователем критериев.
• ? Аудиоэффекты : звуковые эффекты в реальном времени, такие как реверберация, искажение и многое другое.
• ? Алгоритмическая композиция : создание алгоритмической композиции.
• ? MIDI Randomizer : создавайте случайные MIDI-последовательности для творческого вдохновения.
• ?️ Чат с GPT : интегрированный чат с использованием моделей OpenAI GPT для общения в реальном времени.
• ? GPT Randomizer : создавайте случайные фрагменты текста, подсказки или даже тексты песен.

Установка

Предварительные условия

• Питон 3.11

Установить зависимости

Клонируйте репозиторий и перейдите в каталог проекта. Запустите следующую команду, чтобы установить все необходимые пакеты:

pip install pedalboard pydub replicate midiutil soundfile openai numpy pygame

API-ключи

Вам потребуются ключи API для репликации и OpenAI:

• Для репликации зарегистрируйтесь по адресу: https://rescribe.com и следуйте инструкциям, чтобы получить ключ API.
• Для OpenAI зарегистрируйтесь по адресу: https://openai.com/product и следуйте инструкциям, чтобы получить ключ API.

Добавьте эти ключи в соответствующие разделы приложения перед его запуском.

Запуск приложения

После установки необходимых компонентов и получения ключей API вы можете запустить приложение, используя:

python Soundstorm.py

Важный

Это СУПЕР грубо. В настоящее время он существует только как скрипт Python и был протестирован только на двух разных компьютерах Mac. Это более или менее рабочий прототип с очень урезанным графическим интерфейсом. Это может быть глючно и требует доработок. Также вещи определенно нужно почистить, лучше пометить и т. д. и т. п. Мне бы в этом помогла!

Содействие

Вклады приветствуются! Это работа дилетанта. Очень хотелось бы увидеть это воплощённым!

Поддерживать

Для поддержки и запросов функций, пожалуйста, откройте проблему в этом репозитории.

Лицензия

Этот проект лицензируется по лицензии MIT.