Dukungan SDXL-EcomID asli untuk ComfyUI.
Ekstensi ini tidak menggunakan diffuser melainkan mengimplementasikan EcomID secara asli dan terintegrasi penuh dengan ComfyUI.
EcomID meningkatkan representasi potret, menghadirkan tampilan yang lebih autentik dan estetis sekaligus memastikan konsistensi semantik dan kesamaan ID internal yang lebih besar (yaitu, ciri-ciri yang tidak berbeda menurut usia, gaya rambut, kacamata, atau perubahan fisik lainnya).
Anda dapat melihat lebih banyak etalase di repositori SDXL-EcomID.
Di direktori examples , Anda akan menemukan alur kerja dasar dan alur kerja pertukaran wajah khusus.
Tingkatkan ComfyUI ke versi terbaru!
Unduh atau git clone repositori ini ke direktori ComfyUI/custom_nodes/ atau gunakan Manajer.
EcomID memerlukan insightface , Anda perlu menambahkannya ke perpustakaan Anda bersama dengan onnxruntime dan onnxruntime-gpu .
Model:
Model terlatih PuLID menggunakan ComfyUI/models/pulid/ (terima kasih kepada Chenlei Hu karena telah mengonversinya menjadi format IPAdapter)
EVA CLIP adalah EVA02-CLIP-L-14-336, tetapi harus diunduh secara otomatis (akan ditempatkan di direktori pelukan).
Ketergantungan facexlib perlu diinstal, model diunduh saat pertama kali digunakan
Anda juga memerlukan InsightFace dengan AntelopeV2, model yang tidak di-zip harus ditempatkan di ComfyUI/models/insightface/models/antelopev2
Model ip_adapter dari InstantID dapat diunduh dari HuggingFace dan harus ditempatkan di direktori ComfyUI/models/instantid . (Perhatikan bahwa model ini disebut ip_adapter karena didasarkan pada IPAdapter).
Anda juga memerlukan ControlNet yang dilatih pada 2 juta gambar manusia nyata. Silakan letakkan di direktori controlnet ComfyUI.
Jangan ragu untuk menghasilkan gambar dalam berbagai resolusi, karena kami telah melatih jaringan kontrol pada 2 juta gambar berkualitas tinggi.
Anda dapat menetapkan nilai CFG yang lebih tinggi untuk mencapai konsistensi semantik yang lebih baik. Nilai dari 1 hingga 7 dapat diterima, dan 6 direkomendasikan.
Pose orang tersebut disejajarkan dengan keypoint yang dihasilkan dari gambar referensi, seperti di InstantID. Anda dapat memperoleh pose berbeda dengan mengirimkan gambar ke input image_kps .
Ada node lanjutan EcomID yang tersedia, saat ini satu-satunya perbedaan dengan node standar adalah Anda dapat mengatur bobot untuk model adaptor ip (PulID) dan jaringan kontrol secara terpisah.
Merujuk repositori berikut: ComfyUI_InstantID dan PuLID_ComfyUI.
Ingat saat ini hanya kompatibel dengan model berbasis SDXL, seperti EcomXL, leosams-helloworld-xl, dreamshaper-xl, stable-diffusion-xl-base-1.0 dan seterusnya.
Ia bekerja sangat baik dengan SDXL Turbo/Lighting, EcomXL-Inpainting-ControlNet dan EcomXL-Softedge-ControlNet.
Hasil Multi-ControlNet ditunjukkan di bawah ini:
