com.doji.diffusers

Difusores

Um pacote Unity para executar modelos de difusão pré-treinados com Unity Sentis

OpenUPM · Documentação (em breve) · Feedback/Perguntas

Sobre

Esta é essencialmente uma versão da biblioteca de difusores do Hugging Face.

Ainda é muito cedo, portanto, atualmente, apenas um número limitado de pipelines e agendadores é suportado (veja abaixo).

Instalação

via OpenUPM

Em Edit -> Project Settings -> Package Manager , adicione um novo registro com escopo definido:

 Name: Doji
URL: https://package.openupm.com
Scope(s): com.doji

No Gerenciador de Pacotes, instale com.doji.diffusers por nome ou selecione-o na lista em Package Manager -> My Registries

Roteiro

Algumas coisas que podem ser trabalhadas a seguir são:

• adicionar/corrigir orientação sem classificador
• apoiar mais modelos
  • DP 1,5
  • SD 2.1
  • SDXL
  • SD-Turbo
  • SDXL-Turbo
  • Modelos LoRA
• mais implementações de agendador
  • PNDM
  • DDIM
  • Euler Discreto
  • EulerAncestralDiscreto
  • LCM
  • DDPM
  • KDPM2Discreto
  • KDPM2AncestralDiscreto
• mais tipos de pipeline/modelo
  • txt2img
  • img2img,
  • pintar,
  • sofisticado,
  • profundidade2img
  • calêndula
• métodos de pipeline assíncronos (inferência fatiada)
• suporta múltiplas imagens por prompt
• escreva alguma documentação

Dependências

• com.doji.transformers
• com.doji.pngcs