Alibaba lançou uma nova estrutura de processamento de imagens de retratos de IA, UniPortrait, que pode realizar processamento personalizado de imagens de um e vários caracteres e suporta referência de estilo e descrição de texto livre para gerar imagens. O UniPortrait utiliza um esquema de treinamento de dois estágios para manter um alto grau de características faciais realistas, ao mesmo tempo em que oferece suporte a uma ampla gama de funções de edição facial, melhorando significativamente a qualidade e a eficiência da geração de imagens. Seus recursos de personalização eficientes e compatibilidade com ferramentas de controle de geração existentes fornecem aos usuários uma experiência de personalização de imagem sem precedentes. O surgimento do UniPortrait sem dúvida levará a tecnologia de processamento de imagens de retratos a novos patamares e trará mais possibilidades para vários cenários de aplicação no futuro.
Essa estrutura pode não apenas lidar com imagens de uma única identidade, mas também permitir personalização de alta qualidade em cenários multifuncionais. O UniPortrait apresenta a capacidade de manter um alto grau de realismo nas características faciais e suporta uma ampla gama de recursos de edição facial, permitindo que os usuários usem descrições de texto de formato livre para gerar as imagens desejadas sem a necessidade de um layout fixo.
Consistência multifuncional
Durante o processo de treinamento, o UniPortrait utiliza um programa de treinamento cuidadosamente elaborado em duas etapas. A primeira fase concentra-se no treinamento de uma única identidade, enquanto a segunda fase é o ajuste fino de múltiplas identidades. Através deste método de treinamento, o UniPortrait supera os métodos existentes em desempenho de personalização de identidade única e múltipla. Os resultados experimentais também mostram que ele tem boa escalabilidade e é geralmente compatível com as ferramentas de controle de geração existentes.
O lançamento do UniPortrait traz novas possibilidades de personalização de imagens de retratos, especialmente em termos de prompts de formato livre e geração diversificada de layouts. A equipe de pesquisa demonstrou vários exemplos de personalização de identidade única e múltipla, mostrando o grande potencial desta estrutura para aplicações práticas. Resumindo, o UniPortrait não apenas melhora a qualidade da geração de imagens, mas também abre caminho para vários cenários de aplicação futuros.
Entrada do projeto do produto: https://top.aibase.com/tool/uniportrait
Entrada experimental: https://huggingface.co/spaces/Junjie96/UniPortrait
Destaque:
Portrait é uma nova estrutura focada na personalização de imagens de identidade única e múltipla com preservação de características faciais de alta qualidade.
✍️ A estrutura consiste em um módulo de incorporação de ID e um módulo de roteamento de ID, alcançando uma personalização eficiente por meio de um esquema de treinamento em duas etapas.
UniPortrait oferece ricas possibilidades para personalização de retratos, suportando descrição de texto livre e geração de layouts diversos.
Em suma, o UniPortrait oferece aos usuários uma nova experiência de personalização de imagem com suas funções poderosas e operações convenientes. Tem grande potencial para desenvolvimento futuro e vale a pena esperar sua aplicação em mais campos.