O último tutorial do YouTube lançado pelo mestre Jerry Davos explica detalhadamente como usar o Comfy UI para alterar o efeito de iluminação do vídeo e renderizá-lo. O tutorial aborda instalação de software, fluxo de trabalho, configurações de parâmetros e técnicas avançadas, além de fornecer etapas detalhadas e capturas de tela para facilitar o aprendizado e a prática do usuário. Quer você seja um usuário novato ou experiente, você pode se beneficiar muito com isso e dominar rapidamente as técnicas de ajuste de luz de vídeo da Comfy UI para melhorar a eficiência da pós-produção de vídeo. O tutorial também fornece links para download de arquivos de fluxo de trabalho e endereços de execução on-line RunComfy, o que reduz o limite de aprendizado e permite que os usuários comecem facilmente.
Instalação e preparação
Primeiro você precisa baixar o arquivo de fluxo de trabalho de Jerry Davos, o link está no final do artigo. Após o download, arraste-o diretamente para a interface do Comfy e ele solicitará os nós ausentes. Não se preocupe, use o gerenciador para instalar com um clique, é rápido e fácil.
Se você encontrar problemas durante o processo de instalação, Jerry Davos também fornece um link de ajuda, clique para obter a solução. A seguir está um tutorial detalhado de Jerry Davos:
Visão geral do fluxo de trabalho
O fluxo de trabalho é habilmente dividido em vários grupos, cada um com sua funcionalidade exclusiva, desde configurações de entrada até salvamento de saída, tudo de relance.
Configurações de entrada: incluindo configurações de toque de entrada e configurações de vídeo de origem.
Grupo de diferenças de animação: usado para ajustar efeitos de iluminação.
Grupo de composição: composição de IC e mapeamento de luz.
Grupo Case Sampler: Controla o número de etapas na renderização da imagem.
Refinador: Aumenta a resolução de renderização.
Solicitação de entrada: descreva sua imagem e as novas condições de iluminação.
Insira as configurações
Existem 5 configurações aqui:
Etapas do amostrador: determina o número total de etapas executadas pelo KSampler para renderizar a imagem. Não deve ser alterado. [padrão 26]
Aprimorador de detalhes: aprimora detalhes finos na renderização final. [Use valores entre 0,1 e 1]
Semente: Controla a semente de geração de cada KSampler.
Sampler CFG: Controla o valor CFG do KSampler.
Atualização refinada: funciona como um valor de reparo de alta resolução. [Use 1,1–1,6 para obter melhores resultados]
Solicitar entrada
Dica Positiva: Insira a dica que melhor descreve a imagem na nova iluminação.
Nota Negativa: Configurado para fornecer melhores resultados. Fique à vontade para editar.
Nó de codificação de texto de clipe: ajuda na codificação de texto para maximizar a qualidade. Deixe como "Completo"
Modelos e Loras
Ponto de verificação: Escolha qualquer modelo SD1.5 realista para obter resultados precisos. Escolha qualquer modelo SD1.5 para resultados estilizados.
Loras: [opcional] Se desejar, qualquer loras pode ser selecionado na lista. Não use força total. Use cerca de 0,5-0,7 para obter melhores resultados
Análise de configurações básicas
Cada configuração tem uma finalidade, como as etapas do Case Sampler que determinam o quão detalhada é a imagem renderizada e o Detail Enhancer melhorando pequenos detalhes na renderização final.
Semente: Controla a semente de geração de cada amostrador de caso.
Refinador: Semelhante à restauração de alta resolução, melhora a qualidade da imagem.
Solicitação de entrada: Descreva sua imagem, o sistema está configurado para melhores resultados.
Seleção de modelo e vídeo
Escolha o seu modelo V, seja realista ou de desenho animado, não importa. Recomenda-se que a intensidade de Loras seja definida entre 50% e 70% para melhores resultados.
Upload e configurações de vídeo
Carregue o vídeo de origem, certificando-se de que o tamanho do arquivo não exceda 100 MB e que a duração seja de 15 a 20 segundos para evitar memória insuficiente.
Vídeo de mapeamento de luz
Envie seu vídeo com mapeamento de luz, certificando-se de que não seja menor que o vídeo de origem, caso contrário, você receberá erros.
Configurações de renderização
Ajuste a resolução de renderização, seja paisagem ou retrato, a resolução máxima não ultrapassará o valor definido. Recomenda-se usar um valor entre 800 e 1200 para obter melhores resultados.
mapa de luz
Carregar mapa de luz: Clique e carregue o vídeo do mapa de luz desejado.
Ele será dimensionado automaticamente para as dimensões do vídeo de origem
Certifique-se de que seja maior ou igual ao tamanho do vídeo de origem, caso contrário, você receberá um erro.
Light Map ControlNet: Este mapa de luz também é usado como Light controlnet usando este modelo
Use um modelo de rede de controle baseado em luz e tome cuidado para não ter o valor de intensidade CN muito alto para evitar superexposição ou transições de luz muito nítidas.
Diferenças de animação
Carregar modelos Animatediff: Você pode usar qualquer modelo para obter efeitos diferentes.
Outros nós do Animatediff: você precisa saber algo sobre o animadoiff para alterar outras configurações [você pode encontrá-los aqui]
Configurações SMZ: Este é o nó usado para melhorar a qualidade do pipeline do modelo, todas as configurações são predefinidas para funcionar bem.
Composição de ajuste de Lightmap e IC
O nó de ajuste superior acima (cinza) é usado para controlar o ajuste da luz IC para reduzir o contraste e controlar o brilho.
Gerar novo plano de fundo: quando desativado, ele alimenta a imagem original e tenta mapear detalhes semelhantes ao plano de fundo do vídeo de origem com base na "dica de plano de fundo" (se presente na caixa de dicas positivas)
[1menina, sol, pôr do sol, camisa branca, short preto, interior, quarto]
Quando Gerar Novo Plano de Fundo estiver habilitado: Ele irá gerar um novo plano de fundo com base na profundidade
[1 garota, luz solar, pôr do sol, natureza ao fundo, céu]
Além disso, a força e a porcentagem final da malha de controle de profundidade são reduzidas para 45% para criar áreas abertas no fundo.
Top Lightmap: Quando True, o lightmap estará no topo do vídeo de origem e mais dominante; quando False, a fonte estará no topo, mais dominante e mais brilhante;
Área afetada pelo tema: 2 modos de mesclagem funcionam melhor
Escureça as áreas de sombra com base no mapa de luz superior ou inferior.
Ele ilumina áreas de sombra com base no mapa de luz superior ou inferior
O fator de mistura é usado para intensidade.
Ajustes Globais: Controla o brilho, contraste, gama e matiz do mapa de luz final processado de cima.
Remapeamento de imagem: use este nó para controlar a claridade e escuridão geral de toda a imagem.
Quanto maior o valor mínimo, mais clara será a cena
Um máximo mais baixo escurecerá a cena e converterá áreas mais claras em objetos que se transformam, como QrCode Monster CN
É comum usar um valor mínimo de 0,1 ou 0,2 para iluminar um pouco a cena.
Com um valor mínimo de 0, os pixels pretos no mapa de luz terão sombras totalmente pretas.
KSamplers (originais e refinados)
IC Raw Ksampler: Ao contrário de outros amostradores, ele começa na etapa 8 em vez de zero devido às condições do IC-Light (os quadros são eliminados de ruído a partir da etapa 8)
Por exemplo, finalize a etapa 20
Comece as etapas em
0 não terá efeito de mapa de luz.
O efeito de 5 é 50%
10 significa que o efeito é 100%.
Portanto, cerca de 3-8 é um bom valor para testar.
Quando a geração do novo plano de fundo for TRUE, você poderá definir um valor inferior a 5 para obter melhores resultados
Ksampler Refine: Seu princípio de funcionamento é semelhante ao Img2Img Refiner após a amostragem original do IC.
Para as etapas finais de 25
Comece as etapas em
As versões 10 e anteriores funcionarão como o sampler original e fornecerão objetos morph
15 pode funcionar como um verdadeiro refinador
20 não está funcionando corretamente
Mais de 20 e acima produzirão resultados confusos
Portanto, o padrão de 16 é adequado.
Restauração facial
Atualização para reparar o rosto: Se seu rosto não ficar satisfeito após reparar o rosto, você pode atualizá-lo para cerca de 1,2 a 1,6 para obter um rosto melhor.
Dica Facial: Você pode inserir uma dica facial aqui. A configuração padrão é "Sorriso". Você pode mudar isso.
Eliminação de ruído facial: Use cerca de 0,35–0,45. A renderização incorreta pode ocorrer em faces mais altas e também podem ocorrer problemas de face deslizante.
salvar
Quando todos os quadros forem renderizados, eles serão exportados para a pasta de saída do diretório Comfy UI. Você pode ajustar a posição de saída e até renderizar vídeos mais longos em lotes.
Técnicas avançadas
Se desejar, você pode usar o Comfy Cloud2 para executar este fluxo de trabalho. Ele possui uma página de fluxo de trabalho dedicada, todos os documentos estão completos e você pode executá-lo com um clique, sem instalar nenhum nó ou modelo.
Endereço do fluxo de trabalho:
https://drive.google.com/drive/folders/16Aq1mqZKP-h8vApaN4FX5at3acidqPUv
Execute este fluxo de trabalho no RunComfy sem configuração:
https://www.runcomfy.com/comfyui-workflows/comfyui-ic-light-workflow-for-video-relighting
Endereço do vídeo original: https://www.youtube.com/watch?v=q__YTKxtQAE
Espero que este tutorial possa ajudá-lo a dominar facilmente as técnicas de ajuste de luz de vídeo da Comfy UI e a criar trabalhos de vídeo mais artísticos! Lembre-se de seguir Jerry Davos para aprender habilidades mais práticas.