com.doji.diffusers

Diffuseurs

Un package Unity pour exécuter des modèles de diffusion pré-entraînés avec Unity Sentis

OpenUPM · Documentation (à venir) · Commentaires/Questions

À propos

Il s'agit essentiellement d'un portage de la bibliothèque de diffuseurs de Hugging Face.

Il est cependant encore très tôt et, à ce jour, seul un nombre limité de pipelines et de planificateurs sont pris en charge (voir ci-dessous).

Installation

via OpenUPM

Dans Edit -> Project Settings -> Package Manager , ajoutez un nouveau registre étendu :

 Name: Doji
URL: https://package.openupm.com
Scope(s): com.doji

Dans le gestionnaire de packages, installez com.doji.diffusers par son nom ou sélectionnez-le dans la liste sous Package Manager -> My Registries

Feuille de route

Certaines choses sur lesquelles on pourrait travailler ensuite sont :

• ajouter/corriger des conseils sans classificateur
• prendre en charge plus de modèles
  • SD1.5
  • DD 2.1
  • SDXL
  • SD-Turbo
  • SDXL-Turbo
  • Modèles LoRA
• plus d'implémentations de planificateur
  • PNDM
  • DDIM
  • EulerDiscret
  • EulerAncestralDiscret
  • LCM
  • DDPM
  • KDPM2Discret
  • KDPM2AncestralDiscret
• plus de types de pipelines/modèles
  • txt2img
  • img2img,
  • peinture,
  • haut de gamme,
  • profondeur2img
  • souci
• méthodes de pipeline asynchrone (inférence tranchée)
• prendre en charge plusieurs images par invite
• rédiger de la documentation

Dépendances

• com.doji.transformers
• com.doji.pngcs