UI IC Ringan Asli yang Nyaman

UI-IC-Light-Native yang Nyaman

Implementasi asli ComfyUI dari IC-Light.

Memasang

Unduh repositori dan ekstrak ke dalam folder custom_nodes di direktori instalasi ComfyUI.

Atau kloning melalui GIT, mulai dari direktori instalasi ComfyUI:

 cd custom_nodes
git clone [email protected]:huchenlei/ComfyUI-IC-Light-Native.git

Unduh model

Repo utama IC-Light didasarkan pada diffuser. Untuk memuatnya dengan UnetLoader di ComfyUI, kunci state_dict perlu dikonversi ke format ldm. Anda dapat mengunduh model dengan kunci ldm di sini: https://huggingface.co/huchenlei/IC-Light-ldm/tree/main

Ada 2 model:

• iclight_sd15_fc_unet_ldm: Gunakan ini dalam alur kerja FG
• iclight_sd15_fbc_unet_ldm: Gunakan ini dalam alur kerja BG

Setelah Anda mengunduh model ini, letakkan di bawah ComfyUI/models/unet dan muat dengan node UNETLoader .

Node yang direkomendasikan

• ComfyUI-KJNodes: Menyediakan berbagai node topeng untuk membuat peta cahaya.
• ComfyUI-Mudah Digunakan: Paket node raksasa yang berisi segalanya. Hapus node bg yang digunakan dalam alur kerja berasal dari paket ini.
• ComfyUI_essentials: Banyak node perkakas yang berguna. Node pengubahan ukuran gambar yang digunakan dalam alur kerja berasal dari paket ini.
• ComfyUI-IC-Light: Implan IC-Light dari kijai. Ini mencakup node DetailTransfer yang sangat berguna untuk membantu mencegah detail frekuensi tinggi dari gambar input fg.

Alur kerja

Harap pastikan area bertopeng/transparan gambar fg berwarna abu-abu sebelum Anda meneruskannya ke VAE. Jika tidak, latar belakang Anda akan kabur di alur kerja FC atau latar belakang gelap di alur kerja FBC. Anda dapat menggunakan IC Light Apply Mask Grey untuk memastikan warna area yang disamarkan sudah benar. Lihat contoh berikut:

Diberikan FG, Hasilkan BG dan nyalakan kembali

Jika Anda ingin mempertahankan warna asli objek fg, Anda dapat meletakkan objek fg di ruang laten untuk memandu pembuatan lebih lanjut. alur kerja

Diberikan FG dan peta cahaya, Hasilkan BG dan nyalakan kembali

Cahaya dari kanan

Cahaya dari kiri

Diberikan FG dan BG, Letakkan FG di BG dan nyalakan kembali

Pulihkan detail frekuensi tinggi (Teks, dll) dari gambar masukan asli

• Gambar masukan:
• Generasi mentah:
• Setelah transfer detail:

Masalah Umum

Unet IC-Light menerima input tambahan di atas input noise umum. Model FG menerima 1 input tambahan (4 saluran). Model BG menerima 2 input tambahan (8 saluran). Input unet aslinya ada 4 channel juga.

Jika Anda melihat kesalahan berikut, berarti Anda menggunakan alur kerja FG tetapi memuat model BG.

 RuntimeError: Given groups=1, weight of size [320, 8, 3, 3], expected input[2, 12, 64, 64] to have 8 channels, but got 12 channels instead

Jika Anda melihat kesalahan berikut, berarti Anda menggunakan alur kerja FG tetapi memuat model BG.

 RuntimeError: Given groups=1, weight of size [320, 12, 3, 3], expected input[2, 8, 64, 64] to have 12 channels, but got 8 channels instead