fastsag
1.0.0
这是 IJCAI 2024 论文 FastSAG: Towards Fast Non-Autoregressive Singing Accompaniment Generation 的 PyTorch/GPU 实现。演示页面可以在 demo 中找到。
@article{chen2024fastsag, title={FastSAG: Towards Fast Non-Autoregressive Singing Accompaniment Generation}, author={Chen, Jianyi and Xue, Wei and Tan, Xu and Ye, Zhen and Liu, Qifeng and Guo, Yike}, journal={arXiv preprint arXiv:2405.07682}, year={2024} }
下载此代码:
git clone https://github.com/chenjianyi/fastsag/ cd fastsag
从这里下载 fastsag checkpoint 并将所有权重放入 fastsag/weights
BigvGAN 检查点可以从 BigvGAN 下载。我们使用的检查点是“bigvgan_24khz_100band”。我将 BigvGAN 升级到 BigvGAN-v2,检查点会自动下载。
MERT 预训练检查点将从 Huggingface 自动下载。请确保您的服务器可以访问 Huggingface。
源头分离:
cd preprocessing python3 demucs_processing.py # you may need to change root_dir and out_dir in this file
剪辑至 10 秒并过滤显着剪辑
python3 clip_to_10s.py # change src_root and des_root for your dataset
cd ../sde_diffusion python3 train.py --data_dir YOUR_TRAIN_DATA --data_dir_testset YOUR_TEST_DATA --results_folder RESULTS
python3 generate.py --ckpt TRAINED_MODEL --data_dir DATA_DIR --result_dir OUTPUT
毕业 TTS。
科莫语音