轉到ComfyUI/custom_nodes
克隆此儲存庫,路徑應為ComfyUI/custom_nodes/x-flux-comfyui/*
,其中 * 是此儲存庫中的所有文件
到ComfyUI/custom_nodes/x-flux-comfyui/
並執行python setup.py
安裝後運行 ComfyUI 並享受吧!
首次啟動後,將自動建立ComfyUI/models/xlabs/loras
和ComfyUI/models/xlabs/controlnets
資料夾。
因此,要使用 lora 或 controlnet,只需將模型放入這些資料夾中即可。
之後,您可能需要在使用者友好的介面中點擊“刷新”才能使用模型。
對於controlnet,您需要安裝https://github.com/Fannovel16/comfyui_controlnet_aux
您可以利用 12GB VRAM 記憶體使用量來啟動 Flux。
依照儲存庫所述進行安裝 https://github.com/city96/ComfyUI-GGUF
使用倉庫中的flux1-dev-Q4_0.gguf https://github.com/city96/ComfyUI-GGUF
使用參數啟動 ComfyUI:
python3 main.py --lowvram --preview-method auto --use-split-cross-attention
在我們的工作流程中,將“Load Diffusion Model”節點替換為“Unet Loader (GGUF)”
我們為 FLUX.1 訓練了Canny ControlNet 、 Depth ControlNet 、 HED ControlNet和LoRA檢查點FLUX.1 [dev]
您可以在 HuggingFace 上下載它們:
通量控制網路集合
通量控制網路 canny
通量現實主義Lora
Flux-lora-集合
通量毛茸茸洛拉
Flux-IP 轉接器
使用git pull
更新 x-flux-comfy 或重新安裝它。
從 OpenAI VIT CLIP large 下載 Clip-L model.safetensors
,並將其放入ComfyUI/models/clip_vision/*
。
從 Huggingface 下載我們的 IPAdapter,並將其放入ComfyUI/models/xlabs/ipadapters/*
。
使用Flux Load IPAdapter
和Apply Flux IPAdapter
節點,選擇正確的 CLIP 模型並享受您的生成。
您可以在此儲存庫的資料夾工作流程中找到範例工作流程。
IP 適配器目前處於測試階段。我們不保證您馬上就能得到好的結果,可能需要更多的嘗試才能得到結果。但隨著時間的推移,我們將努力使這個過程變得更容易、更有效率。