ScribbleArchitect
1.0.0
Gambar garis, segmentasi, transfer gaya, dan kelas atas dengan Difusi Stabil!
GUI ini memungkinkan pembuatan gambar dari sapuan kuas sederhana, atau kurva Bezier, secara realtime. Fungsi-fungsi tersebut telah dirancang terutama untuk digunakan dalam arsitektur, dan untuk membuat sketsa pada tahap awal suatu proyek. Ia menggunakan Difusi Stabil dan ControlNet sebagai tulang punggung AI untuk proses generatif. Dukungan Adaptor IP disertakan, serta perpustakaan besar gaya yang telah ditentukan sebelumnya! Setiap gambar referensi memungkinkan untuk mentransfer gaya tertentu ke karya garis Anda. Fungsi kelas atas juga ditambahkan, untuk mengekspor hasil dalam resolusi tinggi (berdasarkan ubin ControlNet).
contoh menunjukkan gambar langsung
contoh menunjukkan perubahan gaya (interior)
contoh menunjukkan perubahan gaya (eksterior)
Banyak fungsi baru yang baru-baru ini ditambahkan:
kami baru-baru ini memasukkan sistem lapisan baru, ketika pengguna dapat menggambar garis hitam (untuk memasukkan Coretan ControlNet) atau sapuan kuas warna (untuk Segmentasi ControlNet). Lihat 'Menggunakan aplikasi'. CATATAN: Anda masih dapat menemukan versi lama di bagian 'rilis'.
Pilih 'tipe' desain arsitektur (render eksterior, elevasi fasad, rendering interior, ...) dan gaya. Di sebelah kiri, Anda akan menemukan area gambar. Anda dapat menambahkan garis hitam untuk menentukan garis penting gambar Anda, atau zona berwarna (peta semantik) untuk menentukan di mana objek tertentu harus ditempatkan (pohon, jendela, dll.). Kode warna tertentu dikaitkan dengan setiap jenis objek. Anda tidak perlu khawatir dalam memilih warna yang tepat, karena antarmuka grafis memungkinkan Anda memilih objek yang akan digambar secara langsung. Proses menggambarnya sendiri sepenuhnya standar. Pilih alat Anda dan gambar! (atau hapus). Anda akan melihat adaptasi gambar yang diusulkan secara langsung (kotak centang memungkinkan Anda menonaktifkan inferensi langsung).
contoh menunjukkan penggunaan kuas segmentasi (interior)
Jika Anda kekurangan inspirasi, atau untuk tujuan pengujian, contoh gambar coretan dapat dibuat secara otomatis.
Gambar juga dapat diimpor untuk menghasilkan coretan dan/atau segmentasi secara otomatis.
Kami juga menambahkan fungsi tangkapan layar. itu menciptakan kotak pengambilan (batas biru) yang dapat diseret dan akan menghasilkan coretan berdasarkan zona yang ditangkap. Setelah puas dengan pengambilannya, klik lagi pada alat tersebut untuk menonaktifkannya. Hal ini memungkinkan untuk bekerja dengan alat canggih sebagai masukan (Adobe Illustrator, Inkscape, ...).
Fungsi Tangkapan Layar dengan Inkscape sebagai input
Rendernya dapat diekspor dalam resolusi tinggi, berkat upscaler ControlNet. Opsi lainnya akan segera diintegrasikan!
Peningkatan (render eksterior artistik)
Peningkatan (render interior realistis)
Dukungan untuk media gambar baru-baru ini disertakan. Tekanan pena harus terdeteksi. Diuji pada Ipad Pro + EasyCanvas.
Gambar langsung membutuhkan GPU yang kuat, saya menyarankan untuk mengurangi ukuran gambar (di main.py) jika terlalu lambat! Gambar kelas atas sangat intensif GPU...
Secara default, aplikasi ini menggunakan Dreamshaper (https://huggingface.co/Lykon/dreamshaper-8). Model khusus dapat ditambahkan di folder khusus ('custom_models'). Pos pemeriksaan SD1.5 mana pun seharusnya berfungsi.
pip3 install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu118
(lihat https://pytorch.org/get-started/locally/)
pip install git+https://github.com/sberbank-ai/Real-ESRGAN.git
https://huggingface.co/lllyasviel/sd-controlnet-seg https://huggingface.co/lllyasviel/sd-controlnet-scribble
