ComfyUI_ID_Animator

โหนดที่ใช้ ID_Animator ใน ComfyUI

สังเกต

คุณสามารถค้นหา ID_Animator ได้ในลิงก์นี้ ID_Animator

รายการโหนด ComfyUI ของฉัน:

1. โหนด ParlerTTS: ComfyUI_ParlerTTS

2. โหนด Llama3_8B:ComfyUI_Llama3_8B

3. โหนด HiDiffusion: ComfyUI_HiDiffusion_Pro

4. โหนด ID_Animator: ComfyUI_ID_Animator

5. โหนด StoryDiffusion: ComfyUI_StoryDiffusion

6. โหนดป๊อป: ComfyUI_Pops

7. โหนดเสถียรเสียงเปิด 1.0: ComfyUI_StableAudio_Open

8. โหนด GLM4: ComfyUI_ChatGLM_API

9. โหนด CustomNet: ComfyUI_CustomNet

10. โหนด Pipeline_Tool: ComfyUI_Pipeline_Tool

11.โหนด Pic2Story:ComfyUI_Pic2Story

12. โหนด PBR_Maker:ComfyUI_PBR_Maker

อัปเดต

15-06-2024

1. แก้ไขปัญหาที่อัตราเฟรมของภาพเคลื่อนไหว ddiff ถูกจำกัดไว้ที่ 32 ขอบคุณ ShmuelRonen สำหรับการแจ้งเตือน
2. เพิ่มการควบคุมแบบมีเงื่อนไขของ face_lora และ lora_adapter ที่อยู่โมเดลอยู่ในคำอธิบายโมเดลด้านล่าง
3. เพิ่มการรองรับ diffuser เวอร์ชัน 0.28.0 ขึ้นไป

1. แก้ไขปัญหาของ Animateddiff ด้วยอัตราเฟรมสูงสุดที่ 32 ขอบคุณสำหรับการแจ้งเตือนของ ShmuelRonen
2. เพิ่มการควบคุมแบบมีเงื่อนไขสำหรับ "face_lora" และ "lora-adapter" และที่อยู่โมเดลระบุไว้ในคำอธิบายโมเดลด้านล่าง
3. เพิ่มการรองรับสำหรับดิฟฟิวเซอร์เวอร์ชัน 0.28.0 ขึ้นไป

--- การปรับปรุงก่อนหน้า

1. เปลี่ยนเอาต์พุตเป็นภาพเฟรมเดียวเพื่อความสะดวกในการเชื่อมต่อกับโหนดการสังเคราะห์วิดีโออื่นๆ และยกเลิกตัวเลือกในการบันทึกภาพเคลื่อนไหว GIF ต้นฉบับ
2. เพิ่มเมนูการโหลดโมเดลใหม่ซึ่งมีความชัดเจนมากขึ้น คุณสามารถใส่โมเดลการกระทำเพิ่มเติมลงในไดเร็กทอรี ".. ComfyUI_ID_Animator/models/animatediff_models"

1. เปลี่ยนเอาต์พุตเป็นภาพเฟรมเดียวเพื่อให้เข้าถึงโหนดการสังเคราะห์วิดีโออื่นๆ ได้อย่างง่ายดาย และลบตัวเลือกในการบันทึกภาพเคลื่อนไหว GIF ต้นฉบับ
2. เพิ่มเมนูการโหลดโมเดลใหม่เพื่อให้ตรรกะชัดเจนยิ่งขึ้น คุณสามารถเพิ่มโมเดลการดำเนินการเพิ่มเติมอีกสองสามรายการในไดเร็กทอรี ".. ComfyUI-ID-Animator/models/animateddiff_models"

1.การติดตั้งการติดตั้ง

 git https : // github . com / smthemex / ComfyUI_ID_Animator . git 

2 ไลบรารีข้อกำหนดการพึ่งพา

หากโมดูลหายไป โปรดดูการติดตั้งแยกต่างหากของโมดูลที่หายไปในไฟล์ "หากโมดูลพลาด ให้ตรวจสอบข้อกำหนดนี้.txt"

หากโมดูลหายไป โปรดเปิด "หากพลาดโมดูล ให้ตรวจสอบข้อกำหนดนี้.txt" และติดตั้งโมดูลที่หายไปแยกต่างหาก

3 ดาวน์โหลดจุดตรวจ ดาวน์โหลดแบบจำลอง

3.1 ผู้กำกับ.. ComfyUI_ID_Animator/models

• ดาวน์โหลดจุดตรวจสอบ ID-Animator: ลิงก์ "animator.ckpt"

3.2 ผู้กำกับ.. ComfyUI_ID_Animator/models/animatediff_models

• ดาวน์โหลดจุดตรวจสอบ AnimateDiff เช่นลิงก์ "/mm_sd_v15_v2.ckpt"

3.3 dir.. สบาย/รุ่น/ดิฟฟิวเซอร์

• ลิงค์ดาวน์โหลด Stable Diffusion V1.5 ไฟล์ทั้งหมด
• หรือ
• ลิงค์ดาวน์โหลดไฟล์ส่วนใหญ่ Stable Diffusion V1.5

3.4 ผบ..สบาย/รุ่น/ด่าน

• ดาวน์โหลดลิงก์ "realisticVisionV60B1_v51VAE.safetensors"
  หรือดรีมบูธรุ่นอื่นๆ

3.5 dir.. ComfyUI_ID_Animator/models/image_encoder

• ดาวน์โหลดลิงค์ตัวเข้ารหัสรูปภาพ CLIP

3.6 dir.. ComfyUI_ID_Animator/models/adapter

• ดาวน์โหลดลิงก์ "v3_sd15_adapter.ckpt"

3.7 รุ่นอื่นๆ
การดำเนินการครั้งแรกจะดาวน์โหลดโมเดล Insightface ไปยังไดเร็กทอรี "X/user/username/.insightface/models/buffalo_l"

อีก 4 แห่ง

เนื่องจากผู้เขียน "ID_Animator" ไม่ได้ทำเครื่องหมายข้อตกลงใบอนุญาตโอเพ่นซอร์ส ฉันจึงตั้งค่าข้อตกลงใบอนุญาตโอเพ่นซอร์สเป็นใบอนุญาต Apache-2.0 ชั่วคราว
เนื่องจาก "ID_Animator" ไม่ได้ระบุข้อตกลงใบอนุญาตโอเพ่นซอร์ส ฉันจึงได้ตั้งค่าข้อตกลงใบอนุญาตโอเพ่นซอร์สเป็นใบอนุญาต Apache-2.0 ชั่วคราว

5 ตัวอย่าง

6 ติดต่อ "ID_Animator"

ซวนฮวาเหอ: [email protected]

ฉวนเต๋อ หลิว: [email protected]

เซิงจู เฉียน: [email protected]

ภาพเคลื่อนไหวDif

 @article{guo2023animatediff,
  title={AnimateDiff: Animate Your Personalized Text-to-Image Diffusion Models without Specific Tuning},
  author={Guo, Yuwei and Yang, Ceyuan and Rao, Anyi and Liang, Zhengyang and Wang, Yaohui and Qiao, Yu and Agrawala, Maneesh and Lin, Dahua and Dai, Bo},
  journal={International Conference on Learning Representations},
  year={2024}
}

@article{guo2023sparsectrl,
  title={SparseCtrl: Adding Sparse Controls to Text-to-Video Diffusion Models},
  author={Guo, Yuwei and Yang, Ceyuan and Rao, Anyi and Agrawala, Maneesh and Lin, Dahua and Dai, Bo},
  journal={arXiv preprint arXiv:2311.16933},
  year={2023}
}