分享最好用、最實用的ComfyUI工作流程,最新、最前沿的研究成果和相應的自訂節點(custom nodes),實用的影片、文字教學和知識等。
QQ交流群:801334535。
畫廊(借鏡) | 官方、GitHub | 優質影片 | 資源 |
---|---|---|---|
ideogram | ComfyUI | Nerdy Rodent | OpenArt |
midjourney-showcase | ComfyUI-Manager | Latent Vision | civitai |
ComfyUI官方文件說明 | Olivio Sarikas | -Zho-博客 | |
ComfyUI_examples | Scott Detweiler |
我把最實用的工作流程(workflow)都給毫無保留地免費分享給所有需要的人:
看看最新的custom nodes的排行榜,請看這個網站?nodecafe,由comfyui-workspace-manager構建,根據開源custom nodes
獲得的stars排名!
我自己親測後,覺得是必裝的,且在用的custom nodes
。排名是我認為的,的多少(實時)只是參考。
Custom Nodes(即時) | 簡介(最有用的功能) |
---|---|
ComfyUI | ComfyUI本體,神一樣的存在! ComfyUI快捷鍵 |
ComfyUI-Manager | 安裝、刪除、停用和啟用ComfyUI 各種自訂節點等等功能。 |
ComfyUI-Custom-Scripts | 圖像來源:Image Feed 新增一個面板,顯示目前會話中產生的影像,儲存自己的工作流程。 |
comfyui_controlnet_aux | controlnet的預處理器幾乎都整合到了AIO Aux Preprocessor 節點 |
rgthree-comfy | 讓工作流程更清晰、更簡單、更快捷 |
ComfyUI_LayerStyle | 將一些基本的Photoshop功能遷移到ComfyUI中,還有一鍵移除背景、AI摳圖之類的神奇功能。 |
comfyui-inpaint-nodes | 實現更好的(inpainting)效果,包括SDXL的Fooocus修復模型、LaMa、MAT等。 |
ComfyUI-N-Sidebar | 側邊欄,支援節點的拖放、收藏、搜索,以及類別的展開/收起等功能,大大增強了介面互動體驗。 |
ComfyUI-KJNodes | 有set/get功能,就值了。隱藏了“麵條”,介面清爽多了 |
cg-use-everywhere | 無線連接任何同類型接口,省去重複的連接,很實用、很清爽 |
ComfyUI-AnimateDiff-Evolved | 其他動畫類工作流程必備: - ComfyUI_FizzNodes - ComfyUI-Advanced-ControlNet - ComfyUI-VideoHelperSuite |
ComfyUI-IF_AI_tools | 透過Ollama 使用本地大型語言模型(LLM) 產生提示,增強影像生成工作流程。 |
ComfyUI-Easy-Use | 化繁為簡的節點整合包, 在 tinyterraNodes 的基礎上進行延展,並針對了諸多主流的節點包做了整合與優化。 |
sdxl_prompt_styler | 根據預定義模板來設計提示詞的風格。 |
ComfyUI_Fill-Nodes | 依序(每次渲染時)或隨機(也是每次渲染時)擷取影像; |
comfyui_LLM_party | comfyui作為前端,開發一套完整的用於LLM工作流程搭建的節點庫。可以讓使用者更方便快速地建立自己的LLM工作流程,並且更方便地連結到自己的影像工作流程。 |
ComfyUI-enricos-nodes | 8個圖層隨意拖曳、旋轉、縮放等等進行構圖 |
ComfyUI-Inpaint-CropAndStitch | 自動裁切遮罩區域→放大到最優尺寸→重繪、擴圖後貼回去 |
如果ComfyUI安裝了過多元件,可能會出現環境衝突等問題。我推薦使用Anaconda創建虛擬環境來運行ComfyUI,避免潛在的衝突。就算你的虛擬環境也裝的太多了,引起了衝突,你還可以再創建一個虛擬環境來專門運行起你現在很需要運行的工作流程。具體我寫了份詳細的文檔,請批評指正:Windows環境下ComfyUI自訂節點安裝指南,影片解釋:ComfyUI報錯的終極解決方案!
項目名稱及網址 | 介紹 | huggingface demo(線上產生) | ComfyUI實作/影片介紹 |
---|---|---|---|
InstantID | 【主體特徵】可實現使用單張圖片進行ID保持生成 | InstantID demo | ComfyUI InstantID: ComfyUI_InstantID-(原生支援版) |
SDXL-EcomID | 【主體特徵】阿里媽媽嗎開源 | SDXL-EcomID | SDXL_EcomID_ComfyUI |
PuLID | 【主體特徵】優勢:高速+高保真+風格遷移強 | PuLID demo | ComfyUI-PuLID-ZHO PuLID_ComfyUIcubiq大神版 |
IP-Adapter | 【主體特徵】 | IP-Adapter demo | ComfyUI_IPAdapter_plus |
InstantStyle | 【主體特徵】長處是風格參考 | InstantStyle demo | |
PhotoMaker | 客製化逼真的人物照片 |
1. xinsir-sdxl | 2. lllyasviel大合集 | 3. MistoLine | 4. InstantX-SD3-Controlnet |
---|---|---|---|
5.Shakker-Labs | 6.InstantX | 7.阿里媽媽alimama | 8.TheMistoAI |
9.jasperai | 10.蘋果開源深度 ml-depth-pro comfyui實作:ComfyUI-Depth-Pro | 11.視訊向深度圖DepthCrafter | 12.Lotus基於擴散的高品質密集預測視覺基礎模型,ComfyUI-Lotus |
項目名稱及網址 | 介紹 | ComfyUI實作/影片介紹 |
---|---|---|
mochi1 | mochi-1-preview模型 | ComfyUI-MochiWrapper ComfyUI-MochiEdit |
LivePortrait | 【動畫】高效的肖像動畫- 結合縫合和重定向控制 | ComfyUI-LivePortraitKJ |
ToonCrafter | 【動畫】產生卡通動畫差值,看起來很絲滑,ToonCrafter-for-windows | ComfyUI-ToonCrafter |
GIMM-VFI | GIMM-VFI 模型能夠實現泛化的連續運動建模,並能在任意時間步長對兩個相鄰視訊幀進行插值。 | ComfyUI-GIMM-VFI |
hallo | 【數位人】音訊驅動肖像,復旦大學、百度、南京大學 | 系統需求:Ubuntu 20.04/Ubuntu 22.04, Cuda 12.1? ! |
MimicMotion | 【動畫】基於置信度感知姿態引導的高品質人體運動影片生成 | ComfyUI-MimicMotionWrapper |
champ | 【動畫、影片】透過3D參數引導的可控且一致的人像動畫,這專案用到了Blender! | ComfyUI-champWrapper |
EchoMimic | 【聲音驅動肖像】阿里開源 | ComfyUI_EchoMimic |
Omost | 【LLM賦能SD】將LLM的編碼能力轉換為影像生成(或更準確地說,影像組合)能力,Omost demo | ComfyUI_omost |
---|---|---|
ELLA | 【語意理解】讓大語言模型LLM賦能AI繪畫 | ComfyUI_ELLA |
DenseDiffusion | 【語意理解、解構畫面】處理密集提示詞,即插即用 | ComfyUI_densediffusion |
florence-2 | 【檢測、分割、描述】微軟免費 | ComfyUI-Florence2 |
segment-anything-2 | 【檢測、分割】Meta出品 | ComfyUI-segment-anything-2 |
BrushNet | 【局部重繪】局部重繪效果不錯 | ComfyUI-BrushNet |
---|---|---|
PowerPaint | 【擴圖、擦除、重繪】 | ComfyUI-BrushNet含PowerPaint v2 |
IOPaint | 【擦除、重繪、移除背景、生成文字】集大成,完成度很高的項目 | iopaint官網 |
InSPyReNet | 背景移除效果一流 | ComfyUI-Inspyrenet-Rembg |
BiRefNet | 2024年8月更新了新模型,BiRefNetV2 | |
RMBG v2.0 | 2024年11月更新了新模型briaai/RMBG-2.0 |
flux | 23.8GB完整版FLUX.1-dev模型下載 17.2GBfp8版FLUX.1-DEV Flux.1介紹 | ComfyUI原生支援 |
---|---|---|
Kolors | 【全新模型架構】快手開源 | ComfyUI-KwaiKolorsWrapper |
PixArt-sigma | 【全新模型架構】華為諾亞方舟實驗室、大連理工大學、香港大學合作開發的專案。 親測可用的簡化安裝教程 | ComfyUI_ExtraModels 官方-如何在ComfyUI中使用PixArt 工作流程12-PixArt-sigma |
HunyuanDiT | 【全新模型架構】騰訊開源 | comfyui-hydit官方 ComfyUI原生支援 |
AuraFlow | AuraFlow-v0.2 | ComfyUI原生支援 |
Stable Diffusion 3 | 申請API :Stability API key | 官方版本:ComfyUI-SAI_API |
CogView3 | 智譜出品 |
SUPIR | 【圖片放大】極致卓越的放大方案,模糊照片還原出照片等級質感 | ComfyUI-SUPIR |
---|---|---|
APISR | 【圖片放大】- 對 APISR 的非官方實作。專門用於動畫的超分模型,APISR demo | ComfyUI-APISR |
aura-sr | 【圖片放大】這是GigaGAN論文在圖像條件下放大方面的一個變種,用於實現真實世界圖像的超分辨率。 | ComfyUI-AuraSR-ZHO AuraSR-ComfyUI |
InstantIR | 【圖片放大、修復】一種新型的單一影像修復模型,旨在恢復受損影像,能夠產生極致品質且真實的細節。您還可以透過額外的文字提示來提升InstantIR的效能,甚至實現客製化編輯! | ComfyUI_InstantIR_Wrapper |
res-adapter | 【解析度自適應】即插即用的,可以使任何擴散模型產生無解析度限制的影像 | ComfyUI-ResAdapter |
HiDiffusion | 【高解析度】解鎖預訓練擴散模型中的高解析度創造力和效率 | ComfyUI-HiDiffusion |
In-Context-LoRA | 【一致性】IC-LoRA的核心概念是將條件影像和目標影像拼接成一張複合影像,同時使用自然語言定義任務。這種方法使其能夠靈活地適應各種應用場景。 | 就是普通LoRA的使用方法 |
AnyText | 【生成文字】多語言(包括漢字!)視覺文本生成與編輯 | AnyText安裝指南 AnyText影片指南 ComfyUI-AnyText |
---|---|---|
Glyph-ByT5 | 【生成文字】用於精確視覺文字渲染的定製文字編碼器 | |
IDM-VTON | 【換裝】目前換裝效果最好? | ComfyUI-IDM-VTON |
CatVTON | 【換裝】相對輕量 | Comfyui-CatVTON |
Hyper-SD | 【生成加速】最新的State-of-the-Art 擴散模型加速技術之一。 | Hyper-SD安裝方法及工作流程 Hyper-SD視訊實測 |
LayerDiffuse | 【生成帶透明資訊圖片】使用潛在透明度的透明影像層擴散 | ComfyUI-layerdiffuse |
BasicPBC | 【漫畫上色】 | |
HivisionIDPhotos | 一鍵製作各種尺寸的證件照,整合度很高,可以在線上體驗huggingface-HivisionIDPhotos | HivisionIDPhotos-ComfyUI |
InvokeAI | 【AI繪畫全套解決方案】有畫布功能,可以邊畫邊生成,對專業一些的人來說非常適合的。 | invoke官方模型庫 invoke官網 |
---|---|---|
Fooocus | 前瞻版mashb1t-Fooocus | |
pinokio | 一鍵安裝、運作、管控各類AI項目 | |
SwarmUI | 模組化的Stable Diffusion Web使用者介面 |
facefusion | 作者自認為是“下一代換臉工具” |
---|---|
RVC變聲 | RVC,我視訊用的變聲器,(#^.^#)。下載位址貼心的百度網盤,解壓縮即用! |
ChatTTS | 文字轉語言,主打一個擬人,ChatTTS-uiwebUI版很好 ChatTTS-Enhanced另一個項目。 |
VideoLingo | 翻譯並培養,作者進行了一些很專業的優化,實際上可用。 |
pyvideotrans | 翻譯並配音,也在不斷優化中,都跟蹤著看看吧。 |
marker | 【PDF轉Markdown】安裝簡單,效果驚人的好!拿來翻譯分享論文用! |
GOT-OCR2.0 GOT-OCR-2-GUI | 將所有人工光學訊號(如普通文字、數學/分子公式、表格、圖表、樂譜,甚至幾何圖形)統稱為"字元",並提出了通用OCR理論(General OCR Theory)以及一個優秀的模型,即GOT ,以促進OCR-2.0的到來。 |
開發者 | 簡介(主要貢獻) |
---|---|
ZHO-ZHO-ZHO | BRIA_RMBG 1.4 in ComfyUI:BRIA 開發的目前最好的背景去除模型,已支援批量處理(可去除視訊背景) ComfyUI InstantID: 只需一張圖就可實現高品質的角色保持!多種風格隨心變。 ComfyUI-BiRefNet-ZHO背景扣除神器。 ComfyUI-Phi-3-mini利用本地大語言模式。 |
kijai | ComfyUI-SUPIR ComfyUI-BrushNet-Wrapper ComfyUI-IC-Light |
huchenlei | ComfyUI-layerdiffuse ComfyUI_omost |
lllyasviel | Fooocus stable-diffusion-webui-forge ControlNet IC-Light |
ltdrdata | ComfyUI-Manager ComfyUI-Impact-Pack |
HumanAIGC 阿里 | 阿里的開源項目 EMO:情感肖像活靈活現 AnimateAnyone:有了這個誰都可以跳科目三 OutfitAnyone:換裝,線上示範:OutfitAnyone demo |
TencentARC 騰訊 | PhotoMaker T2I-Adapter BrushNet局部重繪很頂! |
PKU-YUAN-Lab (袁粒研究組-北大信工) | Open-Sora-Plan北大出手還是牛。 MagicTime comfyui:ComfyUI-MagicTimeWrapper |
網址 | 說明 | |
---|---|---|
OpenArt | 【工作流程分享】許多大佬分享了大量的高品質工作流程。 | |
civitai | 【模型、工作流程等】搜尋、下載和分享各種AI 繪畫模型,最齊全的網站,好像沒有之一? | |
Nerdy Rodent | 【Youtube大佬】手把手教你用命令列安裝最新的AI項目 | |
Latent Vision | 【Youtube大佬】ComfyUI_IPAdapter_plus的作者 | |
Olivio Sarikas | 【Youtube大佬】當個SD和ComfyUI都能有20萬粉絲! | |
Scott Detweiler | 【Youtube大佬】Stability.ai的首席品質保證工程師,內部員工真是排面,他的影片挺好的,但是後面影片全部要收費了。 |
ideogram | 這個網站產生的圖片品質不錯,可以產生文字。他們的模型也在不斷迭代中。 |
---|---|
haiper | 【生成影片】個人覺得生成的效果比什麼runway、pika好啊!就是2秒時間太短。 |
suno udio elevenlabs | 【生成音樂、聲音】音樂生成界的chatgpt? |
heygen首頁 hedra | 【heygen】一個雲端影片創作平台,提供了影片編輯(影片翻譯)、AI生成內容(數位人)、個人化客製化、模板場景庫等功能,適合各種背景和技能水平的用戶使用。 【hedra】音訊驅動數位人。 |
Tripo3D rodin | 【生成3D模型】生成的3D模型效果挺不錯的,不斷迭代中。 【3D生成】影眸科技,達到商用等級? |
技巧 | 影片解說 |
---|---|
1️⃣ ComfyUI如何分享模型文件 | 懶人必學!ComfyUI模型共享設定,省空間又省心! 懶人必學!ComfyUI模型共享設定,省空間又省心!_終極版,影片提到的Link Shell Extension下載地址 |
2️⃣ Windows環境下ComfyUI自訂節點安裝指南 | ComfyUI報錯的終極解決方案! |
3️⃣實現翻譯自由 | 實現翻譯自由 |
4️⃣ huggingface下載加速器-webUI | huggingface下載加速器-webUI?雙擊run.bat,然後按住ctrl點擊網址即可。如果下載出問題,可以開關下代理,如果重複下載,需要到C:Usersc6023.cachehuggingfacehub 把之前下載的快取刪除一下,然後再重新下載。 ?(每個人資料夾不一樣哈) |
快速鍵 | 說明 |
---|---|
Ctrl + Enter | 將目前圖新增至生成隊列 |
Ctrl + Shift + Enter | 將目前圖新增至生成佇列的第一位 |
Ctrl + Z/Ctrl + Y | 撤銷/重做 |
Ctrl + S | 儲存工作流程 |
Ctrl + O | 載入工作流程 |
Ctrl + A | 選擇所有節點 |
Alt + C | 折疊/展開選取的節點 |
Ctrl + M | 靜音/取消靜音選取的節點 |
Ctrl + B | 旁路選取的節點(相當於從圖中移除節點並重新連接線路) |
Delete/Backspace | 刪除選取的節點 |
Ctrl + Delete/Backspace | 刪除目前圖 |
Space | 按住空白鍵並移動滑鼠可以移動畫布 |
Ctrl/Shift + Click | 將點擊的節點加入選擇中 |
Ctrl + C/Ctrl + V | 複製和貼上選取的節點(不保持與未選取節點輸出的連接) |
Ctrl + C/Ctrl + Shift + V | 複製並貼上選取的節點(保持未選取節點輸出與貼上節點輸入的連接) |
Shift + Drag | 同時移動多個選取的節點 |
Ctrl + D | 載入預設圖 |
Q | 切換隊列的可見性 |
H | 切換歷史記錄的可見性 |
R | 重新整理圖 |
Double-Click LMB | 打開節點快速搜尋面板 |
對於macOS 用戶,Ctrl 也可以替換為Cmd |