ComfyUI Couleurs MZ

Modifications récentes

• [2024-08-02] Prise en charge de Faceid, ajout de nœuds associés, voir examples/workflow_ipa_faceid.png pour le workflow

• [2024-07-27] Ajout du nœud MZ_KolorsControlNetLoader pour charger le modèle ControlNet officiel

• [2024-07-26] Ajout du nœud MZ_ApplySDXLSamplingSettings pour la version V2 afin de revenir à la configuration du planificateur SDXL.

• [2024-07-25] Correction d'échantillonnage_settings, les paramètres proviennent de planning_config.json, seule la V2 prend effet

• [2024-07-21] Merci à la branche de yiwangsimple pour la réparation et les tests Mac https://github.com/yiwangsimple/ComfyUI-Kolors-MZ

• [2024-07-21] Ajout du nœud MZ_ChatGLM3TextEncodeAdvanceV2

• [2024-07-18] Les nœuds liés à l'IPA ont été pris en charge dans ComfyUI_IPAdapter_plus

• [2024-07-17] Ajout de nouveaux chargeurs et nœuds d'application avancés prenant en charge IPAdapter_plus MZ_KolorsCLIPVisionLoader, MZ_IPAdapterModelLoaderKolors, MZ_IPAdapterAdvancedKolors

• [2024-07-14] Supprimer la compatibilité automatique avec ControlNet et ajouter le nœud MZ_KolorsControlNetPatch

Implémentation de Kolors sur ComfyUI

Référence de https://github.com/kijai/ComfyUI-KwaiKolorsWrapper

Utiliser l'échantillonnage natif ComfyUI

Le workflow est obtenu dans examples/workflow.png

Téléchargement du modèle UNET

Le modèle unet est placé sous le dossier models/unet/

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors

Adresse de téléchargement : https://huggingface.co/Kwai-Kolors/Kolors/resolve/main/unet/diffusion_pytorch_model.fp16.safetensors

Téléchargement du modèle ChatGLM3

chatglm3 est placé sous le dossier models/LLM/

Page d'accueil du modèle : https://huggingface.co/Kijai/ChatGLM3-safetensors

Adresse de téléchargement : https://huggingface.co/Kijai/ChatGLM3-safetensors/resolve/main/chatglm3-fp16.safetensors

Il est recommandé d'utiliser cubiq/ComfyUI_IPAdapter_plus pour l'implémentation d'IPAdapter

Les nœuds liés au faceid sont déjà pris en charge et l'implémentation d'IPAdapter doit mettre à jour ComfyUI_IPAdapter_plus vers la dernière version.

Flux de travail IPAdapter

https://github.com/cubiq/ComfyUI_IPAdapter_plus/blob/main/examples/ipadapter_kolors.json

Flux de travail IPAdapter_FaceIDv2

https://github.com/cubiq/ComfyUI_IPAdapter_plus/blob/main/examples/IPAdapter_FaceIDv2_Kolors.json

Adresse de téléchargement officielle du modèle IP-Adapter-Plus

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-Plus

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-Plus/resolve/main/ip_adapter_plus_general.bin Télécharger sur models/ipadapter/

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-Plus/resolve/main/image_encoder/pytorch_model.bin Télécharger sur models/clip_vision/

Adresse officielle de téléchargement du modèle Kolors-IP-Adapter-FaceID-Plus

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-FaceID-Plus

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-FaceID-Plus/resolve/main/ipa-faceid-plus.bin Télécharger sur models/ipadapter/

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-FaceID-Plus/resolve/main/clip-vit-large-patch14-336/pytorch_model.bin Télécharger sur models/clip_vision/

https://huggingface.co/MonsterMMORPG/tools/resolve/main/antelopev2.zip Téléchargez et extrayez dans models/insightface/models/antelopev2/*.onnx

Adresse de téléchargement officielle du modèle ControlNet

Page d'accueil du modèle (profondeur) : https://huggingface.co/Kwai-Kolors/Kolors-ControlNet-Depth

Page d'accueil du modèle (Canny) : https://huggingface.co/Kwai-Kolors/Kolors-ControlNet-Canny

Page d'accueil du modèle (Pose) : https://huggingface.co/Kwai-Kolors/Kolors-ControlNet-Pose

Adresse de téléchargement du modèle Kolors-Inpainting

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors-Inpainting

https://huggingface.co/Kwai-Kolors/Kolors-Inpainting/resolve/main/unet/diffusion_pytorch_model.safetensors Télécharger sur models/unet/

Implémentation de Kolors sur ComfyUI

Référence de https://github.com/kijai/ComfyUI-KwaiKolorsWrapper

Utilisation de l'échantillonnage natif ComfyUI

Le workflow est obtenu dans examples/workflow.png

Téléchargement du modèle UNET

Le modèle unet est placé dans le dossier models/unet/

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors

Lien de téléchargement : https://huggingface.co/Kwai-Kolors/Kolors/resolve/main/unet/diffusion_pytorch_model.fp16.safetensors

Téléchargement du modèle ChatGLM3

Le chatglm3 est placé dans le dossier models/LLM/

Page d'accueil du modèle : https://huggingface.co/Kijai/ChatGLM3-safetensors

Lien de téléchargement : https://huggingface.co/Kijai/ChatGLM3-safetensors/resolve/main/chatglm3-fp16.safetensors

L'implémentation d'IPAdapter est recommandée pour utiliser cubiq/ComfyUI_IPAdapter_plus

Les nœuds liés au faceid y ont été pris en charge et l'implémentation d'IPAdapter doit mettre à jour ComfyUI_IPAdapter_plus vers la dernière version.

Flux de travail IPAdapter

https://github.com/cubiq/ComfyUI_IPAdapter_plus/blob/main/examples/ipadapter_kolors.json

Flux de travail IPAdapter_FaceIDv2

https://github.com/cubiq/ComfyUI_IPAdapter_plus/blob/main/examples/IPAdapter_FaceIDv2_Kolors.json

Lien de téléchargement officiel du modèle IP-Adapter-Plus

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-Plus

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-Plus/resolve/main/ip_adapter_plus_general.bin Télécharger sur models/ipadapter/

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-Plus/resolve/main/image_encoder/pytorch_model.bin Télécharger sur models/clip_vision/

Lien de téléchargement officiel du modèle Kolors-IP-Adapter-FaceID-Plus

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-FaceID-Plus

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-FaceID-Plus/resolve/main/ipa-faceid-plus.bin Télécharger sur models/ipadapter/

https://huggingface.co/Kwai-Kolors/Kolors-IP-Adapter-FaceID-Plus/resolve/main/clip-vit-large-patch14-336/pytorch_model.bin Télécharger sur models/clip_vision/

https://huggingface.co/MonsterMMORPG/tools/resolve/main/antelopev2.zip Téléchargez et décompressez dans models/insightface/models/antelopev2/*.onnx

Lien de téléchargement du modèle ControlNet officiel

Page d'accueil du modèle (Profondeur) : https://huggingface.co/Kwai-Kolors/Kolors-ControlNet-Depth

Page d'accueil du modèle (Canny) : https://huggingface.co/Kwai-Kolors/Kolors-ControlNet-Canny

Page d'accueil du modèle (Pose) : https://huggingface.co/Kwai-Kolors/Kolors-ControlNet-Pose

Lien de téléchargement du modèle Kolors-Inpainting

Page d'accueil du modèle : https://huggingface.co/Kwai-Kolors/Kolors-Inpainting

https://huggingface.co/Kwai-Kolors/Kolors-Inpainting/resolve/main/unet/diffusion_pytorch_model.safetensors Télécharger sur models/unet/

Résultats des tests avec la même graine à l'aide de ComfyUI-KwaiKolorsWrapper

Le workflow de test provient de examples/workflow_same_seed_test.png

Le workflow de test provient de examples/workflow_same_seed_test.png

FAQ

Erreur lors du chargement du modèle

• Il existe actuellement deux versions de kolors, l'une est de type unet et utilise le chargeur unet, et l'autre est le dossier checkpoints et utilise le chargeur KolorsCheckpointLoaderSimple. Si votre modèle provient du dossier unet de huggingface, essayez d'abord d'utiliser le chargeur unet. (Actuellement, il existe deux versions de kolors, l'une est de type unet utilisant le chargeur unet et l'autre est placée dans le dossier des points de contrôle à l'aide du chargeur KolorsCheckpointLoaderSimple. Si votre modèle provient du dossier unet huggingface, essayez d'abord d'utiliser le chargeur unet)
• Si vous n'êtes pas sûr du type de modèle, essayez les deux

Les utilisateurs Mac ne peuvent pas utiliser (Les utilisateurs Mac ne peuvent pas utiliser)

• Les utilisateurs Mac peuvent accéder à ComfyUI-Kolors-MZ (les utilisateurs Mac peuvent accéder à ComfyUI-Kolors-MZ)

Erreurs liées à IPAdapter

• Assurez-vous que l'ontologie ComfyUI et ComfyUI_IPAdapter_plus sont mises à jour vers la dernière version.

le nom 'round_up' n'est pas défini

• Référence : THUDM/ChatGLM2-6B#272 (commentaire), utilisez pip install cpm_kernels ou pip install -U cpm_kernels pour mettre à jour cpm_kernels

le module 'comfy.model_detection' n'a pas d'attribut 'unet_prefix_from_state_dict'

• Mettre à jour l'ontologie ComfyUI vers la dernière version (Mettre à jour l'ontologie ComfyUI vers la dernière version)

RuntimeError : seuls les tenseurs de type virgule flottante peuvent nécessiter des dégradés

• Essayez d'utiliser la version fp16 du modèle : https://huggingface.co/Kijai/ChatGLM3-safetensors/blob/main/chatglm3-fp16.safetensors

Une erreur s'est produite lors de l'exécution de MZ_ChatGLM3Loader : l'objet 'ChatGLMModel' n'a pas d'attribut 'transformer'

• Vérifiez si le modèle sélectionné par le nœud ChatGLM3Loader a été correctement téléchargé

Crédits

• Couleurs
• Interface utilisateur confortable
• ComfyUI_IPAdapter_plus

Histoire des étoiles

Contact

• WeChat : zone minrs
• Bilibili : minus_zone
• Petit livre rouge : MinusZoneAI

Les astronomes

Parrainage