com.doji.diffusers

Диффузоры

Пакет Unity для запуска предварительно обученных моделей диффузии с помощью Unity Sentis.

OpenUPM · Документация (скоро) · Обратная связь/вопросы

О

По сути, это порт библиотеки диффузоров Hugging Face.

Однако это еще очень рано, поэтому на сегодняшний день поддерживается только ограниченное количество конвейеров и планировщиков (см. ниже).

Установка

через ОпенУПМ

В Edit -> Project Settings -> Package Manager добавьте новый реестр с заданной областью:

 Name: Doji
URL: https://package.openupm.com
Scope(s): com.doji

В диспетчере пакетов установите com.doji.diffusers либо по имени, либо выберите его в списке в разделе Package Manager -> My Registries

Дорожная карта

Вот некоторые вещи, над которыми можно поработать дальше:

• добавить/исправить руководство без классификатора
• поддержка большего количества моделей
  • СД 1,5
  • СД 2.1
  • SDXL
  • SD-Турбо
  • SDXL-Турбо
  • Модели ЛоРА
• больше реализаций планировщика
  • ПНДМ
  • ДДИМ
  • ЭйлерДискретный
  • ЭйлерНаследственныйДискретный
  • ЛКМ
  • ДДПМ
  • КДПМ2Дискретный
  • KDPM2НаследственныйДискретный
• больше типов конвейеров/моделей
  • txt2img
  • img2img,
  • краска,
  • высококлассный,
  • глубина2img
  • бархатцы
• методы асинхронного конвейера (срезовой вывод)
• поддержка нескольких изображений в одном запросе
• написать некоторую документацию

Зависимости

• com.doji.transformers
• com.doji.pngcs