Prompt Engineering for Vision Models

Engenharia imediata para modelos de visão

Explore o curso "Engenharia pronta para modelos de visão", projetada para aprimorar sua compreensão das técnicas rápidas de engenharia nos modelos de texto e visão. Este curso o capacitará a solicitar e ajustar vários modelos de visão de maneira eficaz.

Resumo do curso

Neste curso, você se aprofundará no campo da pronta engenharia para modelos de visão, explorando técnicas para levar modelos como o segmento do Meta's Anything (SAM), o OWL-VIT e o estável Difusão 2.0. Aqui está o que você aprenderá:

1. Geração de imagens : modelos de visão rápidos com texto e ajuste os hiperparâmetros para gerar imagens com as características desejadas.

2. Segmentação da imagem : use coordenadas positivas ou negativas, juntamente com as coordenadas da caixa delimitadora, para solicitar modelos para segmentação precisa da imagem.

3. Detecção de objetos : Empregue instruções de linguagem natural para produzir caixas delimitadoras, isolando objetos específicos dentro das imagens.

4. Pipling : Combine a detecção de objetos, a segmentação de imagens e as técnicas de geração de imagens para substituir objetos dentro de imagens pelo conteúdo gerado.

5. Personalização com modelos de difusão de ajuste fino : para gerar imagens personalizadas com base nas imagens fornecidas de pessoas ou lugares, usando uma técnica chamada Dreambooth.

6. Iteração e rastreamento de experimentos : Aprenda a rastrear experimentos de maneira eficaz usando o Comet, uma biblioteca que ajuda a otimizar os fluxos de trabalho de engenharia de prompt visual.

Pontos -chave

• Modelos de visão rápidos com texto, coordenadas e caixas delimitadoras, ajustando hiperparâmetros para as características de saída desejadas.

• ? Use a pintura para substituir partes de imagens por conteúdo gerado, combinando várias técnicas de modelo de visão.

• Modelos de difusão de ajuste fino para geração precisa de imagens, incluindo personalização com imagens personalizadas.

• Acompanhe os experimentos com eficiência usando o Comet, otimizando seus fluxos de trabalho de engenharia de prompt visual.

Sobre os instrutores

Abby Morgan , Jacques Verré e Caleb Kaiser são engenheiros experientes de aprendizado de máquina no Comet, trazendo seus conhecimentos para guiá -lo através dos meandros da engenharia imediata do modelo de visão.

Para inscrição e detalhes adicionais, visite deeplearning.ai.