Cómoda UI MuseTalk_FSH

CómodoUI-MuseTalk_FSH

¡El cómodo nodo personalizado de MuseTalk para crear videos con audio!

como usar

asegúrese de que ffmpeg funcione en su línea de comandos para Linux

 apt update
apt install ffmpeg

para Windows, puedes instalar ffmpeg mediante WingetUI automáticamente

¡entonces!

 git clone https://github.com/AIFSH/ComfyUI-MuseTalk_FSH.git
cd ComfyUI-MuseTalk_FSH
pip install -r requirements.txt

paquetes mmlab

=2.0.1" mim install "mmdet>=3.1.0" mim install "mmpose>=1.1.0" ">

pip install --no-cache-dir -U openmim 
mim install mmengine 
mim install " mmcv>=2.0.1 " 
mim install " mmdet>=3.1.0 " 
mim install " mmpose>=1.1.0 " 

Descargar pesas

Puede descargar pesos manualmente de la siguiente manera:

1. Descarga nuestras pesas entrenadas.

2. Descargue los pesos de otros componentes:

   • sd-vae-ft-mse
   • susurro
   • desechar
   • cara-análisis-bisente
   • resnet18

或者下载MuseTalk.zip, 解压后把子文件夹放入ComfyUI-MuseTalk_FSH/models/目录

Finalmente, estos pesos deben organizarse en models de la siguiente manera:

 ComfyUI-MuseTalk_FSH/models/
├── musetalk
│   └── musetalk.json
│   └── pytorch_model.bin
├── dwpose
│   └── dw-ll_ucoco_384.pth
├── face-parse-bisent
│   ├── 79999_iter.pth
│   └── resnet18-5c106cde.pth
├── sd-vae-ft-mse
│   ├── config.json
│   └── diffusion_pytorch_model.bin
└── whisper
    └── tiny.pt

Tutorial

• Demostración en 3060 12GB
• Demostración en 4090 24GB

Grupo WeChat y donación

Gracias

• MuseTalk