Generative KI für Krita

Dies ist ein Plugin zur Verwendung generativer KI beim Malen und Bearbeiten von Bildern in Krita. Eine visuellere Einführung finden Sie unter www.interstice.cloud

Die Hauptziele dieses Projekts sind:

Präzision und Kontrolle. Das Erstellen ganzer Bilder aus Text kann unvorhersehbar sein. Um das gewünschte Ergebnis zu erzielen, können Sie die Generierung auf Auswahlen beschränken, vorhandenen Inhalt mit variabler Stärke verfeinern, Text auf Bildbereiche konzentrieren und die Generierung von Anleitungen mit Referenzbildern, Skizzen, Strichzeichnungen, Tiefenkarten und mehr durchführen.
Workflow-Integration. Die meisten Bilderzeugungstools konzentrieren sich stark auf KI-Parameter. Ziel dieses Projekts ist es, ein unauffälliges Tool zu sein, das sich in Bildbearbeitungs-Workflows in Krita integrieren und mit diesen synergieren lässt. Zeichnen, malen, bearbeiten und generieren Sie nahtlos, ohne sich Gedanken über Auflösung und technische Details machen zu müssen.
Lokal, offen, kostenlos. Wir bekennen uns zu Open-Source-Modellen. Passen Sie Voreinstellungen an, bringen Sie Ihre eigenen Modelle mit und führen Sie alles lokal auf Ihrer Hardware aus. Für den schnellen Einstieg ohne große Investitionen ist auch die Cloud-Generierung verfügbar.

Merkmale

Inpainting : Verwenden Sie Auswahlen zum generativen Füllen, Erweitern sowie zum Hinzufügen oder Entfernen von Objekten
Live-Malerei : Lassen Sie die KI Ihre Leinwand in Echtzeit interpretieren, um sofortiges Feedback zu erhalten. Video ansehen
Hochskalierung : Hochskalieren und bereichern Sie Bilder auf 4k, 8k und mehr, ohne dass Ihnen der Speicher ausgeht.
Stabile Diffusion : Unterstützt Stable Diffusion 1.5 und XL. Teilweise Unterstützung für SD3.
ControlNet : Scribble, Strichzeichnungen, Canny Edge, Pose, Tiefe, Normalen, Segmentierung und mehr
IP-Adapter : Referenzbilder, Stil- und Kompositionsübertragung, Gesichtsaustausch
Regionen : Weisen Sie den durch Ebenen definierten Bildbereichen individuelle Textbeschreibungen zu.
Job-Warteschlange : Stellen Sie Generierungsaufträge in die Warteschlange und brechen Sie sie ab, während Sie an Ihrem Bild arbeiten.
Verlauf : Sehen Sie sich jederzeit eine Vorschau der Ergebnisse an und durchsuchen Sie frühere Generationen und Eingabeaufforderungen.
Starke Standardeinstellungen : Vielseitige Standardstilvoreinstellungen ermöglichen eine optimierte Benutzeroberfläche.
Anpassung : Erstellen Sie Ihre eigenen Voreinstellungen – benutzerdefinierte Kontrollpunkte, LoRA, Sampler und mehr.

Erste Schritte

Anweisungen finden Sie im Plugin-Installationshandbuch.

Eine kurze (technischere) Version finden Sie unten:

Anforderungen

Windows, Linux, MacOS
Unter Linux/Mac: Python + venv muss installiert sein

empfohlene Version: 3.11 oder 3.10
normalerweise über den Paketmanager verfügbar, z. apt install python3-venv

Hardware-Unterstützung

Für den lokalen Betrieb wird eine leistungsstarke Grafikkarte mit mindestens 6 GB VRAM (NVIDIA) empfohlen. Andernfalls dauert die Generierung der Bilder sehr lange oder kann aufgrund von unzureichendem Speicher fehlschlagen!

NVIDIA-GPU	unterstützt über CUDA
AMD-GPU	eingeschränkte Unterstützung, DirectML unter Windows, ROCm unter Linux (benutzerdefinierte Installation)
Apple Silicon	Community-Unterstützung, MPS auf macOS
CPU	unterstützt, aber sehr langsam

Installation

Wenn Sie es noch nicht getan haben, installieren Sie Krita! Erforderliche Version: 5.2.0 oder neuer
Laden Sie das Plugin herunter.
Starten Sie Krita und installieren Sie das Plugin über Extras ▸ Skripte ▸ Python-Plugin aus Datei importieren...

Verweisen Sie auf das ZIP-Archiv, das Sie im vorherigen Schritt heruntergeladen haben.
⚠ Dadurch werden alle vorherigen Installationen des Plugins gelöscht. Wenn Sie von Version 1.14 oder älter aktualisieren, lesen Sie bitte die Aktualisierung auf eine neue Version.
Weitere Optionen finden Sie in der offiziellen Dokumentation von Krita.

Starten Sie Krita neu und erstellen Sie ein neues Dokument oder öffnen Sie ein vorhandenes Bild.
Um den Plugin-Docker anzuzeigen: Einstellungen ‣ Dockers ‣ AI Image Generation.
Klicken Sie im Plugin-Docker auf „Konfigurieren“, um die lokale Serverinstallation zu starten oder eine Verbindung herzustellen.

Notiz

Wenn Sie auf Probleme stoßen, sehen Sie sich bitte die FAQ/Liste häufiger Probleme an, um Lösungen zu finden.

Kontaktieren Sie uns über Diskussionen, unseren Discord oder melden Sie hier ein Problem. Bitte beachten Sie, dass die offiziellen Krita-Kanäle nicht der richtige Ort sind, um Hilfe bei Problemen im Zusammenhang mit dieser Erweiterung zu suchen!

Optional: Benutzerdefinierter ComfyUI-Server

Das Plugin verwendet ComfyUI als Backend. Alternativ zur automatischen Installation können Sie die Installation manuell durchführen oder eine bestehende Installation nutzen. Wenn der Server vor dem Start von Krita bereits lokal läuft, versucht das Plugin automatisch, eine Verbindung herzustellen. Auch die Nutzung eines Remote-Servers ist auf diese Weise möglich.

Bitte überprüfen Sie die Liste der erforderlichen Erweiterungen und Modelle, um sicherzustellen, dass Ihre Installation kompatibel ist.

Optional: Werkzeuge zur Objektauswahl (Segmentierung)

Wenn Sie nach einer Möglichkeit suchen, Objekte im Bild einfach auszuwählen, gibt es ein separates Plugin, das KI-Segmentierungstools hinzufügt.

Mitwirken

Beiträge sind herzlich willkommen! Sehen Sie sich den Beitragsleitfaden an, um loszulegen.

Galerie

Live-Malerei mit Regionen (Klicken Sie für Video) Sehen Sie sich die Videodemo an

Inpainting auf einem Foto anhand eines realistischen Modells

Überarbeiten und Hinzufügen von Inhalten zu einem KI-generierten Bild

Details hinzufügen und kleine Teile des Bildes iterativ verfeinern

Ändern der Posenvektorebene, um die Haltung der Charaktere zu steuern (Klicken Sie für Video) Sehen Sie sich die Videodemo an

Steuerungsebenen: Scribble, Strichzeichnungen, Tiefenkarte, Pose Scribble-Kontrollebene Kontrollebene für Strichzeichnungen Kontrollebene der Tiefenkarte Posenkontrollebene