简体中文(简体中文)
对 ComfyUI 的本机 InstantID 支持。
此扩展与许多现有的扩展不同,因为它不使用扩散器,而是本地实现 InstantID,并且与 ComfyUI 完全集成。
Github 赞助商 | ?贝宝
如果您喜欢我的工作并希望看到更新和新功能,请考虑赞助我的项目。
ComfyUI IPAdapter Plus
ComfyUI InstantID(本机)
ComfyUI 要点
ComfyUI人脸分析
更不用说文档和视频教程了。查看 YouTube 上我的ComfyUI 高级理解视频,例如第 1 部分和第 2 部分
保持代码开放和免费的唯一方法是赞助其开发。赞助越多,我就能将更多的时间投入到我的开源项目中。
请考虑 Github 赞助或 PayPal 捐赠(Matteo“matt3o”Spinelli)。对于 50 美元以上的赞助,如果您想在本自述文件中提及,请告诉我,您可以在 Discord 或matt3o gmail.com上找到我。
2024/02/27:在负嵌入中添加了噪声注入。
2024/02/26:修复了一个小但令人讨厌的错误。结果会有所不同,您可能需要降低 CFG。
2024/02/20:我重构了节点,希望它们更易于使用。这是一个重大更新,以前的工作流程将不再起作用。
在examples
目录中,您将找到一些基本的工作流程。
** InstantID 功能简介**
升级ComfyUI到最新版本!
下载或git clone
此存储库到ComfyUI/custom_nodes/
目录中或使用管理器。
InstantID 需要insightface
,您需要将其与onnxruntime
和onnxruntime-gpu
一起添加到您的库中。
InsightFace 模型是antelopev2 (不是经典的 buffalo_l)。下载模型(例如从此处或此处),解压缩并将其放置在ComfyUI/models/insightface/models/antelopev2
目录中。
主模型可以从 HuggingFace 下载,并应放置在ComfyUI/models/instantid
目录中。 (请注意,该模型称为ip_adapter ,因为它基于 IPAdapter)。
您还需要一个controlnet,将其放在ComfyUI controlnet 目录中。
请记住,目前这仅适用于 SDXL。
训练数据充满了水印,为了避免它们在您的世代中出现,请使用与 1024×1024(或标准分辨率)略有不同的分辨率,例如1016×1016效果很好。
将 CFG 降低到至少 4/5 很重要,或者您可以使用RescaleCFG
节点。
该人是根据参考图像生成的关键点摆出姿势的。您可以通过将图像发送到image_kps
输入来使用不同的姿势。
默认的 InstantID 实现似乎确实会烧毁图像,我发现通过向负嵌入注入噪声,我们可以减轻影响并增加参考的可能性。默认的Apply InstantID节点会自动注入35%的噪声,如果你想微调效果可以使用Advanced InstantID节点。
这仍然是实验性的,将来可能会改变。
您可以向这一代添加更多控制网。提供了深度控制网络的示例工作流程。
可以使用 IPAdapter 设置组合的样式。提供了一个示例。
支持多ID,但工作流程有点复杂,生成速度较慢。我会检查是否能找到更好的方法。示例目录中提供了“hackish”工作流程。
有一个 InstantID 高级节点可用,目前与标准节点的唯一区别是您可以分别设置 instantID 模型和 controlnet 的权重。它现在还包括噪声注入选项。这可能对微调有帮助。
instantID模型影响了大约25%的组成,其余的是controlnet。
噪音有助于减少“烧伤”效应。
它与 SDXL Turbo/Lighting 配合得很好。社区检查点的最佳结果。
只有感谢慷慨的赞助商,整个社区才能享受开放和免费的软件。请与我一起感谢以下企业和个人!
舒跑(ComfyUI云)
Ø伊斯坦Ø。奥尔森
杰克·甘恩
内森希普利
杜克尼兹亚
还有我所有的公共和私人赞助商!