МузыкаГен
v1.0
Загрузите MusicGen, платформу для создания искусственного интеллекта, запущенную Meta: MetaMusicGen объявлен онлайн. Пользователи могут вводить соответствующий текст в соответствии со своими потребностями, чтобы создавать свои любимые музыкальные песни. Операция очень проста и не требует никаких профессиональных знаний. Пользователи сети, которым это нравится, приходят и пробуют.
Команда Meta AI, продемонстрировавшая позитивные намерения в отношении генеративного ИИ, не упустила из виду технологический прогресс в создании музыки. Анонсирован MusicGen, языковая модель глубокого обучения для службы создания музыки с использованием искусственного интеллекта, созданная исследовательской группой Audiocraft. Продолжить чтение Meta выпускает генерацию музыки AI MusicGen: она может создавать музыку, а также использовать «текст» для адаптации существующих треков и содержания отчетов.
Помимо анимированных рисунков, которые могут танцевать с граффити-персонажами, команда Meta AI, продемонстрировавшая позитивные намерения в отношении генеративного ИИ, не упустила из виду технологический прогресс в создании музыки. Объявлено, что языковая модель глубокого обучения MusicGen, созданная их исследовательской группой Audiocraft, для службы генерации музыки с использованием искусственного интеллекта, имеет открытый исходный код на GitHub и может полностью генерировать музыку с помощью вашего собственного оборудования графического процессора или Google Colab (вот шаги исследования Facebook). Возможность MusicGen «адаптировать» существующие треки с помощью текстовых подсказок также доступна онлайн — вы можете попробовать ее здесь. Музыкальные клипы будут загружены для создания фрагмента генеративного музыкального контента продолжительностью примерно 12 секунд.
Онлайн-версия MusicGen очень проста в использовании. Автор загрузил почти 4 минуты мелодической музыки. Если сгенерировать с помощью MusicGen основные слова-подсказки, обработка займет более 200 секунд; если использовать относительно сложные демонстрационные слова-подсказки, такие как «Драйвовая поп-песня 80-х с тяжелыми барабанами и синтезаторными пэдами на заднем плане». Генерация будет увеличиваться.
Что касается эффекта адаптации, лично мне он кажется весьма интересным — мне также очень хочется знать, каким будет эффект от создания ИИ-музыки полностью из текста. Сотрудники Meta AI также опубликовали эффекты музыкальной адаптации MusicGen в Твиттере (как указано выше).
Чиновники также уверенно отметили, что по сравнению с другими существующими сервисами, включая MusicLM, Riffusion и Musai, MusicGen может давать лучшие результаты. Это может быть связано с тем, что исследовательская группа упомянула, что MusicGen отличается от других технологий тем, что ему не нужно самостоятельно контролировать семантическую производительность и он может обеспечивать 50 шагов саморегрессивной обработки звука в секунду. Так в чем же ключ к повышению производительности генерации?
