音乐经纪人

其他源码

v1.2.0

下载

音乐代理用户手册

音乐经纪公司

介绍

音乐经纪人标志

MusicAgent 是一个 MAS（多代理系统），用于在 Sonic Pi 中编程歌曲。它使用生成式人工智能根据用户偏好生成歌曲结构、编曲、歌词……。本手册提供有关安装、配置和歌曲生成的说明。它尚未生成歌声（您可以使用样本包含它们，仅使用乐器版本。

建筑师概述

它是如何运作的？

观看音乐经纪人的实际操作

我们定义了不同的助手，他们在歌曲的创作和创作阶段扮演着不同的角色。将从用户的初始输入开始处理不同的步骤。

不同的助理角色：ArtistConfig.json 中定义了不同的角色

艺术家
作曲家
作曲家
编曲者
Sonic PI 编码器
索尼克 PI 审稿人
Sonic PI 混音工程师
硕士工程师
音乐出版商

音乐代理流程

所有角色都参与歌曲创作的不同阶段。

链中序列的配置可以在 MusicCreationChainConfig.json 中找到。
每个阶段的配置和描述在 MusicCreationPhaseConfig.json 中配置。

1. 设计阶段

设计阶段

2. 创建阶段

sonic pi 脚本的实际创建、初始播放、迭代代理或人工审核，然后进行代码重写。

创作阶段

3. 掌握阶段

掌握阶段

4. 发布阶段

根据艺术家配置，包括 sonic pi 脚本文件生成、专辑封面、小册子和可选的歌曲录制。

出版阶段

最终的输出是一本带有专辑封面的小册子（根据所选配置，也可以是录音），当然还有 *.rb 文件中的编码歌曲。

使用音乐代理

先决条件

Sonic Pi：必须安装在您的系统上（需要运行 *.rb 文件）：https://sonic-pi.net/
Python必须安装在你的机器上

模型API

音乐代理与 OpenAI 和 Anthropic API 配合得很好（Anthropic 目前不提供图像生成，因此不会生成专辑封面）。要在两者之间切换，请确保在配置文件或环境变量中设置这两个变量。

OPENAI_API_KEY：设置为系统环境变量或在ArtistConfig/mITyJohn/ArtistConfig.json中。
在 MAC 上：
```
 export OPENAI_API_KEY= '  '
```
在 Windows 上（使用 PowerShell）：
```
 $env :OPENAI_API_KEY= '  '
```
ANTHROPIC_API_KEY：设置为系统环境变量或在ArtistConfig/mITyJohn/ArtistConfig.json中。
在 MAC 上：
```
 export ANTHROPIC_API_KEY= '  '
```
在 Windows 上（使用 PowerShell）：
```
 $env :ANTHROPIC_API_KEY= '  '
```

安装

 # Clone the repository
git clone [repository link]

# Install dependencies
pip install -r requirements.txt

由于人为依赖性，您还需要安装 RUST：https://www.rust-lang.org/tools/install

配置

如果未设置为系统变量，请在ArtistConfig/mITyJohn/ArtistConfig.json中设置OPENAI_API_KEY 。根据需要调整 ArtistConfig.json 中的设置。

默认情况下，艺术家 mITyJohn 将运行音乐创作的基本链。但如果您想要额外的 sonic pi 评估或者甚至开始录音，您可以选择其他代理配置=

Eval：将通过在您的计算机上运行的 sonic pi 实例评估您的 sonic pi 代码
完整：将通过在您的计算机上运行的 sonic pi 实例评估您的 sonic pi 代码，但也会开始录制（目前仅在 Windows 计算机上）
艺术：根据艺术家配置限制专辑封面生成（无歌曲生成）

对于这些扩展链，需要额外的设置：

在您的计算机上启动 Sonic Pi
调整 ArtistConfig.json 并更正 sonic_pi_IP 和 sonic_pi_port（这些可以通过菜单 > IO 在 Soni Pi IDE 中找到）。验证是否允许传入 OSC 消息。
复制并运行以下代码（需要在启动 MusicAgent 之前运行）

e osc_send '127.0.0.1', 4559, '/feedback', e.message end end">

live_loop :listen do
  use_real_time
  script = sync " /osc*/run-code "
  
  begin
    eval script[0]
    osc_send ' 127.0.0.1 ' , 4559, ' /feedback ' , ' MusicAgent Code was executed successfully '
  rescue Exception = > e
    osc_send ' 127.0.0.1 ' , 4559, ' /feedback ' , e.message
  end
end

或者直接在您的 Sonic PI 中加载Sonicpi/Setup/recording.rb 。

启动后，您会注意到 Cues 中的侦听器正在启动。这将使 Sonic Pi 能够播放您的音乐文件并向 MusicAgent 发送反馈。

运行 MusicAgent

MusicAgent 可以通过 2 种不同的方式运行：通过 CLI 或通过 Web 应用程序。

网页应用程序

运行 Web 应用程序将允许您通过 Web 界面与 MusicAgent 交互。

python app.py

该应用程序可视化音乐创作过程的不同阶段，并允许您与 MusicAgent 交互。您还可以与不同的代理进行聊天对话。

音乐经纪人网络应用程序

此外，您还可以查看不同的 Sonic Pi 版本，甚至将它们发送到 Sonic PI IDE。

有关如何使用 Music Agent Web 应用程序的更多详细信息，请参阅 Music Agent 应用程序自述文件

命令行界面

运行 CLI 将允许您通过命令行与 MusicAgent 交互。

python run.py

启动后，您将能够通过多个标准：

出现提示时选择 AI 模型：“gpt-3.5-turbo”、“gpt-4”等。
提供歌曲详细信息：名称、时长、风格
可以选择添加特定请求，例如和弦进行或音乐影响。

Sonic PI 示例可以在“SonicPi/Examples”文件夹中找到。

输出

MusicAgent 将在歌曲文件夹中由曲目名称调用的子目录中生成以下内容：

生成的曲目文件： *.rb 文件可以在 Songs 目录中找到。要播放您的曲目，只需将文件加载到 SONIC PI 中即可。
- 当使用“完整艺术家”配置时，将另外创建录音 WAV 文件（无需随后将其加载到 sonic Pi 中）
包含封面图片（位于同一子目录中）、歌词和有关曲目设置的其他技术信息的小册子
音乐代理日志文件。如果跟踪代码丢失或不完整，您可以验证日志。

在 Sonic Pi 中录制 WAV